1770693687
2026-02-10 03:01:00
AI は鳥の落書きを恐ろしい翼のある生き物に変えました。
ウェッブ・ライト/ZDNET/Runway AI経由
ZDNET に従ってください: 優先情報源として当社を追加してください Googleで。
ZDNET の重要なポイント
- Runway の新機能により、Doodle からビデオを生成できます。
- 印象的ですが、慎重に扱うことで最高のパフォーマンスを発揮します。
- アクセスするには、(少なくとも) Standard Runway アカウントの料金を支払う必要があります。
バイソンの群れを賞賛する入植者の家族が、2頭の悪魔のような翼のある生き物が頭上を飛んでいく中、急いで走り始めます。少女は幽霊のように柵の柱を通り抜けます。
この超現実的な 5 秒のシーンは、モーション スケッチと呼ばれる AI プラットフォーム Runway 内の新機能のおかげで作成されました。名前が示すように、静止画像の上に直接作成できる簡単な落書きからビデオを生成します。
下のクリップの場合、私はまず Google の Nano Banana Pro (Runway のプラットフォームを通じて提供されるテキストから画像への変換モデルの 1 つ) を使用して画像を生成し、それから鳥のような形をいくつか描き、家族とバイソンが逃げる方向を示す 2 本の矢印を単純に描きました。追加のガイダンスとしてテキスト プロンプトをいくつか追加しました。残りはモデルが行います。
Runway はこれらの落書きを解釈して短いビデオをアニメーション化しました。
ウェッブ・ライト/ZDNET/Runway AI経由
このビデオは印象的ではありますが、まだいくつかの欠陥があります。小さな女の子がフェンスを駆け抜けます。
ウェッブ・ライト/ZDNET/Runway AI経由
ChatGPT が探している出力を生成するために複数の精巧に作成されたプロンプトを必要とするのとほぼ同じように、この機能には依然としてある程度の工夫が必要です。いずれにしても、AI によって生成されたビデオ、そして口頭よりも視覚的に考えることを好むクリエイティブ業界の専門家にとって、これは大きな前進となる可能性があります。
「この機能はあらゆるタイプのユーザーにとって役立つ」とランウェイプロダクトマネージャーのアディティ・ポドゥヴァル氏はZDNETに語った。 「最終的には、特定の書面による指示を作成することなく、人々が正確な動作を行えるように支援しています。」
Motion Sketch を試してみて学んだことは次のとおりです。
私の実験
寝不足の入植者家族のイメージを最初に試した後、いわば大ざっぱさを高めることにしました。
私はテキスト プロンプトを使用して家族の画像を生成しました。ただし、Nano Banana Pro via Runway では、落書きのみに基づいて画像を作成することもできます。これは、Microsoft ペイントのようなプラットフォームで直接作成できます。私は作家であり、ビジュアルアーティストではありませんが、木の枝からぶら下がっている蛇のように漠然と望んでいたものをスケッチするために最善を尽くしました。
木の上を這うヘビのスケッチ。
ウェッブ・ライト/ZDNET/Runway AI経由
そこで私はモーションスケッチに目を向けました。前述したように、私は落書きに加えていくつかのテキスト プロンプトを追加することで入植者家族の実験の途中でモデルを完成させましたが、今回は書面によるガイダンスなしでモデルがどの程度うまく機能するかを確認したかったのです。右に滑るヘビのクリップを生成したいと考えたので、体の長さに沿って動きを指示する単純な矢印をいくつか描きました。 6 歳児なら誰でもこれらの矢印の意味を理解できるでしょう。しかし、AI はどのように機能するのでしょうか?長さを 10 秒に設定し、Runway を選択しました 第 4.5 世代 ビデオ モデル (Google の Veo 3 および Veo 3.1 も利用可能) を選択し、[生成]をクリックしました。
枝に沿って動き、ショットの右下から出てくるヘビの比較的スムーズなクリップを期待していましたが、得られたものははるかにトリッキーなものでした。ヘビは体の一部をショットの左側に残し、別のヘビがその体から出てきて木から落ちました。ある時点で、ワニのような足が生えているように見え、それを使って枝に沿って自分自身を引っ張っていました。私が描いた元の矢印も、クリップの先頭に一時的に表示され、その後消滅しました。
確かに、ランウェイではヘビのスケッチにいくつかの課題がありました。
ウェッブ・ライト/ZDNET/Runway AI経由
公平を期すために言うと、ヘビは生物学的な驚異であり、その動きを正確にモデリングすることは、人間であろうと機械であろうと、どのアニメーターにとっても簡単な仕事ではありません。そして、モデルは私の複数の矢を、ヘビが複数の方向に同時に動くように指示していると誤解したようで、明らかに混乱させました。そこで私は戻って、元の画像に矢印付きの単純なテキスト プロンプトを追加しました。「蛇は枝に沿って滑ります」。
今回の最終製品は、私が考えていたものに少し近づきました(ヘビの体が突然複製されたり、足が生えたりすることはありませんでした)。動きはまだぎこちないように見えましたが、繰り返しますが、ヘビの動きはかなり難しい課題であり、多くの複雑で細かい物理学が関係しています。
プロスペクト公園で炎のスケッチが完全なたき火に変わりました。
ウェッブ・ライト/ZDNET/Runway AI経由
もう 1 つの実験: モデルが実際の写真でどの程度うまく機能するかを確認したかったので、ラップトップから 1 枚をアップロードしました。数か月前にブルックリンのプロスペクト バークで撮った写真です。
私は事実上、火の普遍的なアイコンである、オレンジ色がちりばめられ、上向きに放射状に広がる赤い波線を描きました。繰り返しますが、私は才能のあるイラストレーターであるとは主張しませんが、ほとんどの人は私がこれで何をしようとしていたかを認識できるでしょう。ランウェイのモデルもそれを察知し、私の写真に写った静かな湖畔の風景の中心に巨大な焚き火を落とした。繰り返しになりますが、私のスケッチはクリップに一瞬表示され、その後、波打つ線が徐々に短くなるサイケデリックな動きで消えました。気のせいかもしれないが、たき火の横の木々がその熱で黒くなっているようにさえ見えた。
持ち帰り
他の生成 AI ツールと同様、Motion Sketch にも不完全性や不具合があります (木の梁を通過する少女、脚が生える蛇、最終的なビデオ クリップに私のオリジナル スケッチの波線が一瞬現れます)。それでも、私は感動しています。
ここでは、AI を使用してビデオを生成するためのまったく新しい形式を垣間見ることができます。これにより、想像力と制作の間の障壁がこれまで以上に低くなる可能性があります。 「これこそ私が待っていたものです」とある X ユーザー 投稿されました ランウェイの火曜日の発表の下で。 「ビジョンを描いて、それがビデオとしてレンダリングされるのを観察しますか? 一生エンジニアを促すことができないクリエイターにとって、絶対的なゲームチェンジャーです。」
現時点では、特定のビジョンを念頭に置いている場合は、まだかなりの試行錯誤が必要ですが、それでも、それは将来に何が起こるかについてのエキサイティングなプレビューであることに変わりはありません。そして、実際に何を作りたいのかという明確なビジョンを念頭に置かず、創造性の精神だけで取り組んでいる場合でも、おそらく特にそうですが、試してみる価値は間違いなくあります。
アクセス方法
Motion Sketch を使用するには、(少なくとも) Runway の Standard サブスクリプションが必要です。これには、ユーザーあたり月額 12 ドルがかかり、625 の月間クレジットが付属します。
ユーザー ダッシュボードからアクセスするには、左側のメニューで[アプリ]をクリックし、[Explore Gen-4.5]コレクションの下、または画面の右半分のプレビュー ウィンドウの下にある[モーション スケッチ]を選択します。そこには、[今すぐ試す]というラベルのボタンが表示されます。
そこから、画像をアップロードし、「スケッチ」→「スケッチのエクスポート」→「生成」をクリックするだけです。
#Runway #の新しい #ビデオ #ツールを使用して数分で落書きをビデオ #クリップに変換しました #その方法は次のとおりです