後期制作分野において、Adobeは常に業界のリーダー的存在です。最近、Adobe MAXカンファレンスで、驚異的なFirefly AIビデオ機能が正式に発表されました。
この技術により、ビデオ内の欠損部分をドラッグ＆ドロップするだけで簡単に修復でき、RunwayやSoraに匹敵する効果が得られます。さらに特筆すべきは、Adobe Photoshopが全面的にアップグレードされ、史上最強のバージョンになったことです。
Premiere Pro「ジェネレーティブエクステンド」機能の登場
Premiere Proで発表された「ジェネレーティブエクステンド」（Generative Extend）機能は、今回のアップデートにおける最大のハイライトと言えるでしょう。ビデオの冒頭、末尾、あるいはタイムライン上の空白を埋める必要がある場合、ドラッグ＆クリックするだけでAIが迅速に拡張し、完璧なタイミング編集を実現します。
多少不完全なショットであっても、AIが自動的に視線の動きを修正します。例えば、人物が画面外を走り回っている場合でも、AIは簡単に画面の境界を調整し、時間と労力を節約できます。
また、ユーザーはワンクリックでビデオクリップに余分な映像と音声をインテリジェントに接続でき、編集プロセスが大幅に簡素化されます。特に、精密な時間点の編集を行う際にその威力を発揮します。
現在、ビデオ拡張は2秒以内という制限がありますが、それでも多くの小さな欠陥のために再撮影が必要となる煩わしさを解消するのに十分です。拡張されたビデオは、720pまたは1080pの解像度で、毎秒24フレームの滑らかな映像で出力できます。
この機能は、元の映像と完璧に調和する映像を生成するだけでなく、オーディオ効果も拡張できます。「room tone」ボタンをクリックすると、音響を延長または滑らかに処理できます。
例えば、環境音を10秒間に延長して、作品により多くのディテールと雰囲気を加えることができます。ただし、現時点では、会話や音楽コンテンツの延長には対応していません。
ジェネレーティブエクステンド機能は、今年後半にPremiere Proのベータ版で提供開始予定です。Adobeはユーザーからのフィードバックに基づいて継続的にアップデートを行い、ユーザーは生成された結果にワンクリックで「いいね」または「ダメ」を付けることができます。
「ジェネレーティブエクステンド」以外にも、Adobe Premiere Proの今回のアップデートには、AIベースの強力な機能が多数含まれており、ビデオ編集の効率を総合的に向上させます。
テキストからビデオ機能
ユーザーは簡単なプロンプトを入力するだけで、あらゆるビデオを生成できます。リアルな実写効果、クールな3Dアニメーション、ストップモーションアニメーションなど、AIがすべて対応します。
さらに、既に生成されたビデオに対して、「カメラコントロール」機能を使用して、ショットのアングル、動きなどのパラメーターをさらに詳細に調整できます。
例：「雨の降る街の中央で、男性の映画のようなクローズアップポートレート。光と影の雰囲気は陰鬱で劇的で、色調は青とシアンを基調とする。男性の容貌は非常にリアルで、肌の質感は精細で、顔には細かいあごひげが生えている。微妙な動きは柔らかく滑らかで、カメラは固定されている。画面には濃厚なフィルムグレインと質感が表現されている。水滴が男性の顔にゆっくりと流れ落ち、はっきりと見える。」
ユーザーはFireflyを使用して、炎、煙、光斑などの特殊効果要素を生成し、ビデオの視覚的な深みを大幅に向上させることができます。Adobe Premiere ProとAfter Effectsを使用することで、これらの要素を既存のビデオに重ね合わせて、クールな効果を生み出すことができます。
画像からビデオ機能
ユーザーは参照画像とテキストプロンプトをアップロードしてビデオコンテンツを生成します。この機能は、クローズアップなど、単一の画像フレームに基づいて補足ショットを簡単に作成できるだけでなく、静止画を動的にして新しいBロール素材を生成し、ビデオ制作者に大きな利便性と創造性を提供します。
この技術は、元のショットのアクションや意図を変更することもできます。例えば、編集者が特定のアクションを変更したい場合、この機能を使用して変更を視覚化でき、再撮影を行う必要がありません。
オリジナル：
生成：
Adobe Fireflyモデルは、ショットの遠近（クローズアップ、ミドルショット、ロングショットなど）、アングル、カメラの動きなど、豊富なショットコントロールオプションを提供し、ユーザーは必要なビデオコンテンツをより正確に生成できます。ただし、このプロフェッショナルな機能は、ユーザーがより詳細なテキストプロンプトを提供する必要があることを意味します。公式のプロンプトテンプレートを参照してください。
テキスト生成と字幕機能
ビデオに対して正確な字幕と注釈を自動的に生成し、テキスト編集を容易にします。さらに、AI駆動の自動編集とシーン検出技術により、ビデオ内のシーンの切り替えをインテリジェントに認識して編集し、クリエイターの時間を大幅に節約します。
ビデオアスペクト比の自動調整
今日のマルチプラットフォーム配信のニーズに対応して、Adobeは自動再構成と適応機能も導入しました。AIは、さまざまなソーシャルメディアプラットフォームの仕様に合わせてビデオのアスペクト比を自動的に調整し、作品がすべてのプラットフォームで完璧に表示されるようにします。
自動カラーグレーディング
画質に関しては、新バージョンではカラーマッチングと調整機能が導入され、自動的に色彩を調整し、ビデオ全体の視覚的な一貫性を確保します。オーディオ面でも大きな進歩があり、新しいオーディオエンハンスメント技術により、会話や音質が大幅に向上し、視聴者に最高の聴覚体験を提供します。
インテリジェントな選択と置換機能により、クリエイターはAIを使用してビデオ内の特定の要素を迅速に置換または強化し、創造的な表現の可能性を広げます。
Photoshopの新しいAI機能
AdobeはPhotoshopにも一連の革新的なAI機能を導入しました。これらの機能は、ユーザーのワークフローを簡素化し、画像編集の品質と効率を向上させることを目的としています。
これらの新機能には以下が含まれます。
「ノイズ除去」機能
Google Pixelスマートフォン搭載のMagic Eraserと同様に、ユーザーは簡単なジェスチャーで画像から不要なオブジェクトをすばやく削除できます。この機能は、通行人やケーブルなど、一般的なノイズを自動的に認識して削除するため、手動での選択と削除の手間を大幅に削減できます。
「ジェネレーティブフィル」機能
ジェネレーティブフィル機能が大幅に向上し、ユーザーのテキスト指示に従って画像を塗りつぶし、よりリアルで自然な結果が得られます。
「ジェネレーティブエクステンド」機能
ユーザーは元の画像の境界の外側に画像を拡張でき、創造的な表現の空間が広がります。
「ジェネレーティブシミラー」と「ジェネレーティブバックグラウンド」機能
ユーザーは画像のバリエーションをすばやく生成し、背景コンテンツを置き換えることができます。これらの機能は、ユーザーの創造的な選択肢を大幅に豊かにし、作業効率を向上させます。
Adobeは、「クリエイター中心」のAI使用方法を特に強調し、クリエイターの仕事への尊重とサポートを保証しています。同社は、すべてのAIモデルのトレーニングがライセンスされたコンテンツでのみ行われ、ユーザーの個人データは使用されないことを約束しています。
透明性を高めるために、AdobeはAI生成コンテンツに「コンテンツ証明書」を提供し、ユーザーが創作の起源とプロセスを理解し、コンテンツのトレーサビリティと著作権の明確性を確保します。
これらの新しいAI機能は、現在Photoshop、Photoshop Beta、およびPhotoshopのウェブバージョンで利用可能であり、ユーザーはすぐにこれらの強力な新ツールを体験できます。Fireflyビデオモデルを体験したいユーザーは、待機リストに参加して、機能リリース時に最初に体験する機会を得ることができます。
詳細：https://www.adobe.com/products/premiere/ai-video-editing.html
