ワシントン大学研究チームが最近発表した「逆向きの絵画」プロジェクトは、科学技術界と芸術界で大きな注目を集めています。この革新的な技術は、名画を正確に複製できるだけでなく、絵画の全過程を視覚化することもでき、芸術創作と学習に新たな可能性を切り開きます。

この技術の中核は、独自の拡散モデル逆向きの絵画手法にあります。研究チームは、多数の実際の芸術家の絵画ビデオを分析し、高度なテキストと領域理解技術を組み合わせることで、AIが詳細な絵画「指示」を生成するよう訓練しました。これらの指示はその後、拡散レンダラーに入力され、空白のキャンバス上に徐々に生き生きとした絵画を構築し、人間の芸術家の創作過程をシミュレートします。

image.png

具体的には、このプロセスには以下の重要なステップが含まれます。

データ収集と学習:研究チームは294個のアクリル風景画の絵画ビデオを収集し、詳細な処理を経てモデルのトレーニングに使用しました。これにより、AIは実際の芸術家の絵画技術とスタイルを学習し、模倣できるようになりました。

要素の理解と指示の生成:モデルは画面内のさまざまな要素(空、木、人物など)を識別し、それに基づいて絵画の順序を決定する、順序付けられた絵画指示を生成します。

拡散モデルの適用:拡散モデルを使用して、AIは空白のキャンバス上に徐々に詳細を追加し、人間の芸術家の創作効果をシミュレートします。

正確な位置特定と時間制御:モデルはテキスト指示を生成するだけでなく、各要素の位置を正確に特定するための領域マスクも作成します。同時に、時間要素も考慮し、実際の絵画速度をシミュレートすることで、プロセスのリアルさを高めています。

一貫性の確保:テスト段階では、モデルは最初から創作を開始し、以前の生成結果に依存することで、絵画全体の過程の一貫性と生動性を確保します。

このプロジェクトの研究チームには、東北大学出身のChen Bowei氏と上海科技大学出身のWang Yifan氏という2人の中国人研究者が含まれています。この2人の研究者は、コンピュータビジョンとグラフィックスの交差点において深い研究背景を持ち、特に画像とビデオ生成技術に特化しています。特筆すべきは、彼らの以前の「Paints Undo」プロジェクトもアニメーション分野で大きな注目を集めていたことです。

この技術の登場は、Redditなどのソーシャルメディアプラットフォームで活発な議論を巻き起こしました。支持者たちは、この技術が絵画学習の強力なツールとなり、失われた絵画技術を「解明」するのに役立つ可能性があると主張しています。しかし、一方で、芸術作品を偽造するために悪用される可能性や、伝統的な芸術創作に悪影響を与える可能性を懸念する声もあります。

議論はあるものの、AI逆向きの絵画技術が芸術創作と教育分野に新たな可能性をもたらしたことは否定できません。これは、芸術愛好家が巨匠の作品の創作過程をより深く理解するのに役立つだけでなく、新たな創作のインスピレーションや手法を生み出す可能性もあります。

しかし、技術の進歩は芸術創作に役立つべきであり、人間の芸術家の独自の創造性を置き換えるべきではないことを認識する必要があります。今後、技術革新と芸術の本質のバランスをどのように取るのか、AIを使用して人間の創造性を強化するのではなく、どのように置き換えるのかが、芸術界と科学技術界が共に直面する重要な課題となるでしょう。

プロジェクトアドレス:https://top.aibase.com/tool/inverse-painting