速報: Adob​​e Premier Pro は 5 月にビデオ用の生成 AI を統合します。 オブジェクトの置換、Firefly 経由でのビデオの拡張、OpenAI の Sora、Runway、Pika サードパーティ エンジンのサポート

世界は生成 AI で何が起こっているかに驚愕しており、OpenAI のような企業が Sora をビデオでプレビューしているため、世界はその可能性に興奮しています。 Sora はまだ一般公開されていませんが、多くのティーザー クリップが公開されており、そのテクノロジーは革新的です。

このテクノロジーが Adobe などのビデオ編集者にどのような影響を与えるのか、多くの人が疑問に思っていましたが、今日その答えが得られました。

アドビは、今年後半にリリースされる Adobe Premiere Pro 内で生成 AI をプレビューしました。 これにより、ビデオ作成および制作ワークフローに新しい機能が追加され、すべてのプロ編集者がビデオ制作の高速ペースに追いつくために必要な、新たなクリエイティブの可能性が提供されます。

今年 Premiere Pro に追加される新しい生成 AI ツールにより、ユーザーはシーン内のオブジェクトの追加や削除、既存のクリップの拡張など、すべてのビデオの編集を効率化できます。 これらの新しい編集ワークフローは、画像、ベクター、デザイン、テキスト効果を含む Firefly モデルのファミリーに加わる新しいビデオ モデルによって強化されます。

アドビは、イメージング、ビデオ、オーディオ、3D などの深い専門知識を持つカテゴリで Firefly AI モデルの開発を継続しており、これらのモデルを Creative Cloud と Adobe Express 全体で深く統合します。

アドビはまた、サードパーティの生成 AI モデルを Premiere Pro などの Adobe アプリケーションに直接導入するというビジョンをプレビューしました。 Creative Cloud には常に豊富なパートナーとプラグインのエコシステムがあり、この進化により Premiere Pro は、あらゆるワークフローに適合する最も柔軟で拡張可能なプロフェッショナルビデオツールとして拡張されました。 アドビのお客様は、次世代のエンターテイメントやメディアを作成および編集する際に、選択肢と無限の可能性を望んでいます。

このビデオで紹介されているワークフローはすべて、 実ピクセル これらは、Adobe の今後のビデオ用 Firefly モデルに加え、Open AI の Sora モデル、Runway の Gen-2 モデル、および Pika Labs のモデルを活用したワークフローから生成されます。

初期の調査では、プロのビデオ編集者が将来、Premiere Pro に統合された OpenAI と Runway のビデオ生成モデルを活用して、プロジェクトに編集するための B ロールを生成する方法を示しています。 また、Pika Labs を Generative Extend ツールと併用して、ショットの最後に数秒を追加する方法も示します。

Adobe Firefly とさまざまなサードパーティ モデルを活用した新しい生成 AI 機能を提供することで、Adobe は顧客が Premiere Pro で毎日使用しているワークフローを離れることなく、さまざまな新機能にアクセスできるようにします。

アドビはまた、新しいフェードハンドル、クリップバッジ、ダイナミック波形、AI ベースのカテゴリータグ付けなどを含む、Premiere Pro での AI を活用したオーディオワークフローの一般提供が近々開始されることも発表しました。

Premiere Pro における Generative AI の未来

アドビは、Firefly の新しいビデオ モデルを活用した、今年後半に Premiere Pro に導入される生成 AI ワークフローのテクノロジー プレビューを紹介しました。 さらに、初期の「こっそり」では、プロの編集者が将来、Open AI と Runway のビデオ生成モデルを活用して B ロールを生成する方法や、Pika Labs と Generative Extend ツールを使用して、B ロールを数秒追加する方法が示されています。ショットの終わり。

ジェネレーティブエクステンド

フレームをシームレスに追加してクリップを長くできるため、編集のタイミングを完璧に合わせたり、スムーズなトランジションを追加したりすることが簡単になります。 この画期的なテクノロジーは、プロの編集者が毎日遭遇する一般的な問題を解決し、編集を微調整するための追加メディアを作成したり、追加のビートのためにショットを保留したり、トランジションをより適切にカバーしたりすることを可能にします。

オブジェクトの追加と削除

オブジェクトを選択して追跡し、置き換えるだけです。 不要なアイテムを削除し、俳優のワードローブを変更したり、机の上の絵画や写実的な花などのセットのドレッシングをすばやく追加したりできます。

テキストからビデオへ

Premiere Pro 内でまったく新しい映像を直接生成します。 プロンプトにテキストを入力するか、参照画像をアップロードするだけです。 これらのクリップは、アイデアを考えてストーリーボードを作成したり、実写映像を補強するための B ロールを作成したりするために使用できます。

生成 AI に関する初期の会話の多くは、「最高の」 AI モデルを生み出すための企業間の競争に焦点を当てていましたが、アドビはより多様な未来を見据えています。 アドビの数十年にわたる AI の経験は、AI が生成したコンテンツが毎日の活動の自然な一部である場合に最も役立つことを示しています。 アドビのほとんどの顧客にとって、生成 AI は創造的な方向性を探求するための出発点であり、インスピレーションの源にすぎません。

アドビは、ユーザーがあらゆるソースのあらゆる素材をあらゆるプラットフォームで使用して、想像力のスピードで制作できる業界標準のツールとシームレスなワークフローを提供することを目指しています。 それが Adobe Firefly であろうと、その他の特殊な AI モデルであろうと、アドビは、アドビ アプリケーション内からの統合プロセスを可能な限りシームレスにするよう取り組んでいます。

アドビは、責任あるイノベーションに取り組む姿勢で独自の AI モデルを開発しており、その学んだことを適用して、アプリケーション内でのサードパーティ モデルの統合が同社の安全基準と一致していることを確認する予定です。

Content Authenticity Initiative の創設者の 1 つとして、Adobe は、コンテンツ認証情報 (オンライン コンテンツの栄養ラベルとして機能する無料のオープンソース テクノロジ) をアプリケーション内で作成されたアセットに添付し、ユーザーがコンテンツがどのように作成され、何を作成したかを確認できるようにすることを約束します。 AI モデルは、Adobe プラットフォームで作成されたコンテンツの生成に使用されました。

AI を活用したオーディオ ワークフローが Premiere Pro に登場

Adobe の新しい生成 AI ビデオ ツールに加えて、Premiere Pro の新しいオーディオ ワークフローが 5 月に一般提供され、編集者はサウンドの品質を正確に制御および改善するために必要なものがすべて提供されます。 最新の機能には次のようなものがあります。

インタラクティブなフェードハンドル
編集者は、クリップ ハンドルをドラッグしてオーディオ フェードを作成するだけで、これまでよりも迅速にカスタム オーディオ トランジションを作成できます。

オーディオ カテゴリのタグが付いた新しいエッセンシャル サウンド バッジ
AI はオーディオ クリップをダイアログ、音楽、効果音、またはアンビエンスとして自動的にタグ付けし、新しいアイコンを追加するので、編集者はワンクリックで仕事に適したコントロールに即座にアクセスできます。

エフェクトバッジ
新しいビジュアル インジケータにより、どのクリップにエフェクトがあるのかが簡単に確認でき、新しいクリップをすばやく追加したり、シーケンスから直接エフェクト パラメータを自動的に開くことができます。

タイムラインの波形を再設計
クリップ上のトラックの高さが変化すると波形のサイズがインテリジェントに変更され、豪華な新しいカラーによりシーケンスが読みやすくなります。

さらに、AI を活用した Enhance Speech ツール (不要なノイズを即座に除去し、録音状態が良くない会話を改善する) が 2 月から一般提供されています。