読了時間:3分

ジェネレーティブ塗りつぶし|不要なものを消して自然な背景を描き足す仕組み

公開日 更新日

ポイントを30秒で

生成塗りつぶし(インペインティング)とは、写真の一部を切り取ったり消去したりした際に、その空白を違和感のない新しい画像で自然に埋めるAI技術です。単なる周囲の切り貼り(コピペ)ではなく、光の差し込み方や遠近感を計算して水面の波紋やレンガの継ぎ目まで自律的に描き足します。

観光地の写真から見知らぬ通行人が一瞬で消える魔法

旅先で撮影した最高の一枚を見返すと、記念碑のすぐ隣に見知らぬ通行人が大きく写り込んでいたとします。スマートフォンの画面上でその人物を指でなぞって「消去」をタップすると、わずか数秒で通行人は消え去り、そこには元からあったかのような滑らかな石畳と美しい芝生が違和感なく描き足されました。

Adobe Photoshopやスマートフォンの「消しゴムマジック」に搭載されているこの機能は、ジェネレーティブ塗りつぶし(専門用語でインペインティング)と呼ばれます。かつてプロの写真修正士(レタッチャー)が何時間もかけて行っていた高度な修復作業が、AIの力によって誰でも画面を指でなぞるだけで実行できるようになりました。

従来の切り貼り修正と、ゼロから景色を描き出すAI(潜在拡散モデル)の違い

従来の画像編集ソフトにあった「コンテンツに応じた塗りつぶし」は、写真の中の別の場所(近くの草むらや空)から画面の小さな四角い破片(ピクセルのパッチ)を機械的にコピーして隙間を埋める手法でした。この方法では、複雑な模様が途中でずれたり、同じ石の模様が不自然に繰り返されたりする欠点がありました。

最新のジェネレーティブ塗りつぶしでは、画像を段階的に描き出すAI(潜在拡散モデル / Latent Diffusion Model)を活用します。AIは指定された塗りつぶしの対象部分(マスク領域)を一度白紙(ノイズ)に戻し、周囲の光の当たり方や遠近感(パースペクティブ)、建物の建築様式を総合的に理解した上で、「そこに本来何があるべきか」をゼロから新しく描き出します。

消去だけでなく「新しい物の追加」や「写真の外側の拡張」へ広がる表現

ジェネレーティブ塗りつぶしの真価は、単にいらないものを消す作業にとどまりません。

  • 言葉による指示(プロンプト)で自由な物を追加する:消去を指定した湖の上に「浮かぶ木製のボート」と文字で入力すれば、湖面の波の揺れや周囲の光の反射を正確に反映させたボートが自然に描き込まれます。
  • 写真の枠の外側まで広げて描く技術(アウトペインティング):正方形で撮影された写真の左右を広げ、元のカメラの画角の外側に広がっていたはずの大自然や街並みをAIに想像させて、広大なパノラマ写真へと拡張します。

「写真=真実の記録」という前提が崩れた社会の課題

写真という記録手段は、およそ2世紀にわたり「現実に起きた出来事の動かぬ証拠」として裁判や報道で信頼の土台となってきました。しかし、特別な知識がなくても痕跡を残さず写真の要素を自由自在に作り替えられるようになった現代において、写真に対する無条件の信用は揺らぎつつあります。

報道写真の信頼性を守るため、カメラのシャッターを切った瞬間に撮影機器や位置情報を改ざんできないデジタル証明として記録する技術規格(C2PA規格などのコンテンツ認証)の普及が急速に進んでいます。

ジェネレーティブ塗りつぶしは、思い出の写真をより美しく整える素晴らしい創作の道具です。一方で、写真の見た目だけを鵜呑みにせず、発信元や文脈を冷静に見極める力(メディアリテラシー)を持つことが、これからのデジタル社会を生きる上で欠かせません。

参考資料
  1. Generative Fill and Inpainting in Adobe FireflyAdobe
  2. High-Resolution Image Synthesis with Latent Diffusion ModelsComputer Vision and Pattern Recognition (CVPR)