アドビ、Premiereのタイムライン上にそのまま動画/オーディオエフェクト生成可能に

アドビが映像編集アプリのアップデートを発表。Premiereでは、タイムライン上で動画やオーディオ生成が行なえる「生成メディアツール」が追加されるほか、After EffectsにおいてもAIアシスタント機能がパブリックベータ版として利用できるようになる。

Premiere

生成メディアツールを実装。タイムライン上で自分の好きな範囲を選択して、プロンプトを通じて動画やオーディオを生成できるようになった。プロジェクト内のリファレンスフレームを使用することで、前後の編集内容に馴染むメディアを生成できる。Fireflyのほか、Google Veo、Kling、Runway、Lumaなどのパートナーモデルから選択可能。生成可能なものは動画とサウンドエフェクト。

動画は、ソースモニターまたはプログラムモニターからスポイトツールのようなマークで直接参照するフレームを取得できる。

参照したいフレームを揃え、プロンプトを入力すれば、生成メディアツールで選択した箇所に生成された映像が挿入される。一度別の画面でFirefly Webを開いて手動で書き出したり、アップロードする必要なく、Premiereの編集画面でそのまま生成が行なえる。

タイムライン上の実際のビジュアルコンテキストを利用することで、統一感のある映像が生成可能だという。

サウンドエフェクトも、生成メディアツールで音声欄を選択すれば生成可能。プロンプトのみだけでなく、その場で自分の声でオノマトペなどを録音すれば、作成するサウンドのリズム、タイミング、強弱を調整しながらサウンドエフェクトを生成できる。

例えば、ジッパーを上げる音を生成する場合、プロンプトに「ジッパーを上げる音」と入力して、ボイスレコードボタンを押して「ジィー」っと言って録音すれば、録音した声の強弱に寄せたジッパーを上げる音が生成される。

ベータ版の機能では、オーディオのクリーンアップ、分離、調整をより簡単に行なえるAIオーディオツールを追加。

次世代のノイズリダクションを実現したという「音声を強調」にくわえ、ノイズの多い会話音声をクリーンアップしながら、オーディオクリップを音声・リバーブ・音楽・効果音などの個別の要素に分離する「音源を分離」を用意。ほかにも、重なっている2人の話者の音声を自動的にそれぞれ独立したトラックに分離する「クロストークを分離」、手動でキーフレームを設定することなく、会話・音楽・その他のオーディオ要素の音量バランスを自動的に調整する「新しい自動ダッキング」なども使用できる。

カラーモードの新機能をベータ版に搭載。リップ、カスタムグループ、またはシーケンス単位で、露出と色温度のバランスを調整する「自動カラー」機能が追加される。ほかにも、暗さ、ぼかし、色収差などをコントロールしながら、印象的なビネット効果を作成できる「ビネット」モジュール、カーブ編集を通じて中間調を細かくコントロールできる「ミッドトーン」モジュールも用意する。

マスク機能も強化され、1つの調整項目から別の調整項目ヘマスクをドラッグ&ドロップできるようになる。新たにデザインされたプロパティパネルでは、マスクのコントロール機能も向上する。

After Effects

After Effectsでは、ベータ版にAIアシスタント機能を搭載。これまで何時間もかかっていた手作業でのインデックス作成や技術的な問題解決を自動化し、数分で完了できるという。

例えば、プロジェクト全体を再整理や、壊れたエクスプレッションの修復、コードを書かずに自然言語で新しいエクスプレッションリグを作成する機能などが利用できる。アクティブなコンポジションだけでなく、プロジェクト全体の内容を理解してサポートするとのこと。

写真素材を選択してAIアシスタントに「90年代風のコラージュのような映像を作りたい」とプロンプトを打ち込めば、写真素材がコラージュ風に加工されて、動きが付くといったところまで作ることができる。

Flame.io

Flame.ioは、今回日本語に対応。全てのプランを対象に、共有されたFrame.ioのストレージをローカルにマウントすることで、ダウンロードや同期を行なうことなく、ローカル保存と同等のパフォーマンスで、高品位なメディアファイルを即座に開いて作業できるようになる。