読了時間:3分
文章からの画像生成AI|言葉を視覚イメージへ変換する技術とプロンプトの力
ポイントを30秒で
文章から画像を作るAIとは、日常の言葉で指示を入力すると、その内容に合ったイラストや写真風の画像を自動で作り出す技術のことです。多くのシステムでは、画像と言葉の結びつきを学んだ仕組みが、入力された指示を手がかりに画面の乱れや色合いを段階的に整えていくことで画像を完成させます。
頭の中にあるイメージを言葉にするだけで、目の前に絵が現れる体験
「午後の柔らかな木漏れ日が差し込む静かな読書部屋、窓際には湯気の立つマグカップと緑の観葉植物」と頭の中に浮かんだ情景を文字で打ち込みます。送信ボタンを押すと、わずか数秒で、まるで一流の写真家が撮影したかのような美しい部屋の一枚絵が画面に描き出されました。
MidjourneyやDALL-E、Stable Diffusionに代表される画像生成AIは、絵を描く特別な訓練を受けていない人にも、自由な表現の翼を届けてくれました。コンピューターは言葉という文字の記号を、どのようにして具体的な色彩や光の陰影へと変えているのでしょうか。
砂嵐から絵を彫り出す:言葉と画像の橋渡し役と意味の案内図
画像生成AIは、インターネット上の既存のイラストを切り抜いてパズルのように組み合わせているわけではありません。数億組もの「画像と説明文」のペアを学習したAI(CLIPなど)が、言葉と見た目の結びつきを、頭の中の見えない地図(埋め込み空間)の上に整理して覚えています。
使う人が指示文(プロンプト)を入れると、AIはその言葉が指し示す場所を見つけ出します。そして、テレビの砂嵐のようなランダムな色の粒(ノイズ)から、一歩ずつ色の濁りを取り除き、霧の向こうから景色が浮かび上がるように絵を仕上げていきます。
大ざっぱな一言と具体的に伝えた指示文のわかりやすい違い
思い通りの絵を描いてもらうには、言葉で情景をくっきりと具体的に伝えることが大切です。
- 大ざっぱな指示文(プロンプト):「森の中の家」(AIはどんな家か、どの時間帯か、どんな画風かを推測するしかなく、ありきたりなCG画像になりやすい。)
- 具体的に条件を定めた指示文(プロンプト):「朝霧の立ち込める北欧の針葉樹林に佇む小さな木造コテージ。暖炉の煙が煙突から立ち上り、木製の窓枠には結露がついている。35mmレンズで撮影した映画のワンシーンのような自然光の陰影、落ち着いた温かみのある色調。」
後者の指示文が優れた絵を生み出すのは、光の加減や建物の形、カメラの距離、色合いの雰囲気がはっきりと示されているため、AIが迷うことなく描くべきイメージに集中できるからです。
AIがよくつまずく苦手な描写と、人間の見分ける目
目覚ましい進化を遂げた画像生成AIですが、特定の描写においては今でもはっきりとした苦手分野を持っています。
- 文字や看板の乱れ(タイポグラフィの崩れ):看板や服に文字を書かせようとすると、アルファベットの形が崩れたり架空の記号になってしまいます。
- 手指や複雑な道具の重なり:指の本数が不自然に増えてしまったり、フォークの刃の数が揃わなかったりする形の乱れが起きやすくなります。
- お手本データの著作権とマナー:実在の作家さんの画風を無断で真似することへの法的な議論が続いており、仕事などで使う際の権利の確認がとても重要になっています。
言葉から画像を作る技術は、私たちの想像力を広げてくれる新しい絵の具です。道具の得意なところと苦手な限界を知り、出来上がった絵の不自然さに気づく人間の確かな観察眼こそが、素敵な作品を生み出す一番の鍵となります。
参考資料
- Imagen: Text-to-Image Diffusion ModelsGoogle Research