Runway の共同創設者兼最高技術責任者であるアナスタシス ジャーマニディス氏は、フォーチュン キャンペーン中に… [+] 2023 年 12 月 11 日月曜日、米国カリフォルニア州サンフランシスコで開催される Brainstorm AI カンファレンス。このカンファレンスには機械学習と人工知能のリーダーが集まり、業界を評価し、AI の新しいビジネス ケースを検討します。写真家: デビッド・ポール・モリス/ブルームバーグ
© 2023 ブルームバーグ ファイナンス LP
今週、AI ビデオ ジェネレーター Runway がリリースされました 第一幕、アニメーションの新時代を予感させる。この機能は、AI ビデオ生成における 2 つの大きな課題に取り組みます。 表情 そして維持 キャラクターの一貫性。
これらはすべて、複雑な顔のモーション キャプチャ ソフトウェアを使用せずに、表情をデジタル アバターにマッピングすることなく実現できます。
Runway Act-One はどのように機能しますか?
「フェイシャル アニメーションの従来のパイプラインには、多くの場合、複雑な複数ステップのワークフローが含まれます。これらには、モーション キャプチャ機器、複数のフッテージ リファレンス、手動によるフェイス リギングなどが含まれます。私たちのアプローチはまったく異なるパイプラインを使用し、俳優の演技によってのみ直接駆動され、追加の機器を必要としません。」 滑走路調査 氏は、Act-One での画期的な進歩は、アニメーション コンテンツ作成の障壁を下げることであると説明しています。
ランウェイの紹介ビデオでは、ゲストが日常の瞬間を共有しました。彼らは、電話が壊れた話、チームのプロジェクトを応援する話、食料品を選ぶ話、上司とのスパーリングの話、面白い話の話などをしました。
彼らの顔はますます大きくなり、不満のしかめっ面、衝撃のあえぎ、疑いの目を細め、爆笑し、失望の口をとがらせた。
次に、第 1 幕では、これらの表現を、魔女、王、キツネ、さらにはローマの彫刻など、漫画や現実的なアニメーションのキャラクターに移し、混乱、喜び、驚き、怒り、悲しみ、無関心などを表現しました。
目標は、ユーザーが本物のような表情で反応する顔をアニメーション化できるようにして、キャラクターをより信頼できるものにし、ストーリーをより魅力的なものにすることです。
アニメーションはどう変わるのか?
ウォルト・ディズニーが結成されたばかり 新しいビジネスユニット 映画、テレビ、テーマパーク部門全体での AI と複合現実の使用法を評価および開発する。
AI テクノロジーがなぜ重要なのかを知るには、以下を振り返ってください。 アニメーションの進化。
1937年にディズニーの 白雪姫と七人の小人 初の長編アニメーションとして観客を驚かせた。すべてのフレームは手で描かれ、動きや表情を一貫して捉えるために透明なシートにペイントされています。それは何十年にもわたって高いハードルを設定しました。
LMPC(ゲッティイメージズ経由)
そして1995年にピクサーの トイ・ストーリー コンピュータ生成画像 (CGI) を全面的に使用することでアニメーションの画期的な出来事を記録しました。アニメーターは、奥行きと詳細を持って動く 3D キャラクターを構築しました。
アバター (2009) はアニメーションにおける新たなマイルストーンをマークしました。 CGIとパフォーマンスキャプチャを組み合わせることで、 アバター 超現実的なキャラクターに命を吹き込みました。印象的な例の 1 つは、サム・ワーシントン演じるジェイク・サリーがバンシーを飼いならす場面です。このシーンでは、大胆さと決意、そして警戒心と根底にある恐怖が混ざり合った、曖昧な感情のちらつきがすべて明らかになります。
俳優主導のモーション キャプチャと CGI のこの融合は、アニメーション映画の新しい標準を確立しました。
-(ゲッティイメージズ経由)
Runway の Act-One は、複雑な機器や広範な専門知識を必要とせずに制作を民主化することで、アニメーションの新時代の可能性を示しています。
AI が生成した幻覚ビデオの多くでは、登場人物が 予期せぬ変化をする。物語の途中で顔が変わると、視聴者は納得できなくなります。
Act-One は、ユーザーが自分自身や俳優を撮影し、それらの動きをキャラクターに直接マッピングできるようにすることでこの問題を解決します。
このようにして、キャラクターはそのまま残り、物語をしっかりと支えます。
Runway AI を活用して包括的なストーリーテリングを実現
Runway Act-One は、電子商取引やエンターテイメントから ソーシャルメディアコンテンツ 開発と企業研修。
広告とマーケティング より魅力的なものにすることができ、ゲームをよりインタラクティブなものにすることができます。
しかし、私たちはあらゆるテクノロジーの進歩を利益主導型に変える必要があるのでしょうか?
代わりに、クリエイターは Act-One を利用して、前人未到のストーリーを伝える必要があります。これは、社会的および人種的正義だけでなく、ダイナミックなビジュアルと少ない経済的コストで持続可能な実践を提唱する絶好の機会です。
私たちの周りで、人生経験が深く感動的な人々にインタビューすることができます。
小さな村で起きた祖母の人生、彼女が目撃した社会の変化、そして彼女が乗り越えた困難について語る物語を写真に収めましょう。
人種暴力に対抗するための取り組み、つまり立ち直り、忍耐、共同体の支援、希望についての友人の語りを文書化します。
近くの森林を守るために人生を捧げてきた地元住民にインタビューするところを想像してみてください。
あるいは、ハリケーンの被害を受けた地域で家の再建を手伝うボランティアのストーリーを視覚化することを考えてみましょう。
人の心を動かす表現には意味と豊かな経験が必要です。
Act-One のようなアプリの真の価値は、実体験に基づいてキャラクターを自由に選択できることにあります。
Youtuber は Act-One を使用して、ひねり、粘り強さ、強さに満ちたコミュニティの生活に光を当てることができます。
非営利団体は、疎外された社会集団や環境破壊のオーラルヒストリーをアニメーション教育ビデオで記録することができます。
ゲッティイメージズ
アニメーション業界とエンターテインメント業界はすでに参入し始めています。ジェームズ・キャメロン監督や 賈張柯 は映画に AI を使用することを計画しています。
しかし、映画の専門職以外の幅広いクリエイターが、より包括的で多様なアニメーションの制作に貢献し、あらゆる階層からの声やストーリーが輝けるようになるでしょう。
AI アニメーションの限界と潜在的なリスク
その期待にもかかわらず、Act-One やその他の AI ビデオ ジェネレーターには限界があります。
- 頭の動きはほとんどが 1 つの平面に限定されているため、キャラクターが別のキャラクターに話しかけるために簡単に向きを変えたり、会話中に動的に動いたりすることはできません。
- 空間的および物語的文脈 AIではキャラクター間のインタラクションを生成するのが難しい。
- 複雑なシーンを作成するには、複数の参照イメージとフレームが必要です。クリエイター コミュニティからのその他のチュートリアルやサンプルが役に立ちます。
- 誰でもアイデンティティを構築できるようになると、本物の表現と構築されたペルソナの間の境界線が曖昧になります。
特に若者は、AI によって作られた顔や声で満たされた世界を生きていることに気づくかもしれません。
これらのツールが私たちの日常生活の一部になるにつれ、私たちは次のことを考えなければなりません。フィクションと現実をどのように区別するのでしょうか?私たちはどのような物語を選ぶのでしょうか?そしてそれは私たちにとって何を意味するのでしょうか?
全長の詳細なアニメーションはまだ先のことかもしれません。しかし、公共の利益を重視し、人間の真の感情を呼び起こすコンテンツを作成することで、AI ビデオ ジェネレーターの開発を積極的に形作ることができます。
それは、自分自身に対する見方を再構築し、社会に前向きな変化をもたらすストーリーをどのように推進できるかについてです。
#ランウェイ #がアニメーションを変える語られないストーリーを伝えるためにそれを使用する方法