News
お知らせ
最新のお知らせはこちらをご確認ください。
Teaser PV
ティザーPV
Technology Overview
技術の概要
昨今話題の画像生成AIでは「プロンプト」と呼ばれる命令文をAIに入力し画像を生成するのが一般的です。それは人とAIの一対一のプロセスであり、人がAIに命令しているとも言えるでしょう。ミツアちゃんは「AIとみんなでつくるアート」をコンセプトにしており、YouTubeの配信で視聴者の皆様のコメントから方向性を決めて少しずつ作品を作っていきます。AI VTuberを通してみんなと一緒に作品を作っていくという今までない参加型アート体験の創出を目指します!
また、昨今の画像生成AIでは他人の著作物がその著作権者の知らないうちに学習データセットに取り込まれてソフトウェアの開発のために使用されており、法的には問題がない場合であっても、その倫理的問題が指摘されています。ミツアちゃんは既存の学習済みのStable Diffusionのモデルをそのまま使うことはせず、当社が権利的に又は心理的にクリーンと考えるデータ*1でゼロから学習*2することや、学習画像提供者に返礼をすることで、アーティストに対する倫理的問題の改善も目指します! (現時点では「生成画像の表現に関する倫理的問題」の解決に重点を置いています。詳しくはこちら。)
*1 : パブリックドメイン/CC0の画像や弊社が著作権を持つ画像等の権利者の許諾を得ることなく利用できる画像及び弊社が画像生成AIの開発のために使用することについて事前に明示的な許諾を得た画像。
*2 : 生成画像の表現に直接影響するU-NetとVAEをゼロから学習。入力プロンプトを解釈する辞書に相当するText EncoderはOpenCLIP ViT/H-14を使用。
How Training Works
学習の仕組み
ミツアちゃんのAIは「潜在拡散モデル」の仕組みがベースになっており、その学習は3段階で行われます。
-
STEP 1
1100万枚以上のパブリックドメイン/CC0画像など権利的にクリーンなデータのみでU-NetとVAEをフルスクラッチで学習し、ミツアちゃんはアートの基本的な概念を倫理的に勉強しました。この学習モデルは「Mitsua Diffusion One」として公開されました。なお、このモデルは生成画像の表現に関する倫理的問題の解決に重点を置いており、表現能力は高くありませんのでご了承ください。また、現時点では、Text Encoderの部分はOpenCLIPを使用しております。詳細はこちらの記事でご説明しております。
-
STEP 2
第2段階として、学習参加申請が承認されたX(Twitter)アカウントから収集された画像および、Discordサーバーに投稿された画像を学習データセットに追加し、STEP1で使用した画像とあわせて追加学習します。学習参加申請が承認されたアカウント以外の画像を収集することはありません。学習参加申請においては、アカウントを審査させていただき、権利侵害等の問題があるアカウントは承認されない場合がありますのでご注意ください。なお、参加方法には参加方法は2種類あります。
1.X(Twitter)アカウントで「#みつあ勉強用」付きツイートで参加
2.X(Twitter)アカウントの過去の画像も含めて学習に参加
それぞれの参加方法の詳細は学習参加申請のページをご確認ください。
こちらの画像には守っていただきたいルールがありますので、詳細は、学習画像ガイドラインをご確認ください。
一度アカウントが承認されると、専用Discordサーバーに参加可能になり、Discord内で一括で学習画像を投稿していただくことも可能です。
なお、一度参加を選択されてから、その後オプトアウト(学習に参加しない状態)に変更していただくことも可能です。第2段階以降の学習は逐次ゼロから行われ、学習モデルに除外されたデータの影響が残り続けることはありません。学習参加者の皆様には、絵藍ミツアの画力に貢献していただいた御礼として、画像枚数と内容に応じた返礼をご用意します。
→学習参加申請はこちらから -
STEP 3
最後に、第3段階として「#みつあ勉強用」ツイートの画像を中心としたデータセットで、絵藍ミツアのAIが微調整されます。このデータセットに追加された画像は、絵藍ミツアの画風・概念獲得に大きく影響を及ぼします。また、学習参加者の皆様のクレジットをコントリビュータークレジットのページに掲載させていただいております。
なお、提供していただいた画像を使用して学習したモデルは、学習画像ガイドラインに記載されているとおり、絵藍ミツアのSNS及び研究開発のためにのみ使用され、それ以外の目的で使用されることはありません。また、学習参加者限定のDiscordサーバー内で非商用での画像生成の試用を準備中です。なお、学習されたモデル自体は、権利者への適切な還元が不可能になること等から、一般公開の予定はありません。今後のモデル公開の方針についてはこちらをご確認ください。
絵藍ミツアの学習プロセス
Step2, Step3は逐次繰り返しゼロから行われます。
絵藍ミツアの学習に参加する方法
学習参加者専用のDiscordサーバーで学習画像を投稿することも可能です
How YouTube streaming works
配信の仕組み
絵藍ミツアの作品制作活動はYouTube配信を通して、インタラクティブに行われます。
配信時のYouTubeコメントでリアルタイムに作品テーマを募集したり、コメントを構成の決定材料にしたりして、少しずつ絵を描いていきます。
完成した作品はCC0 1.0 Universal (CC0 1.0) Public Domain Dedicationライセンスで公開されます。ただし、作品が何らかの二次創作の要素を含む場合は、公開される作品のライセンスは各公式の二次創作ガイドラインに従います。なお、配信の詳細や初回配信日程は決定次第SNSアカウントでお知らせします。
Links
関連リンク
Contact
お問い合わせ