動画編集の新時代
新鮮な短尺の動画コンテンツに対する需要が高まる中、動画エディター、映画制作者、コンテンツ制作者には、より多くの仕事をさらに短時間でこなすことが求められています。現在、エディターは映像のカット編集だけでなく、色補正、タイトル付け、視覚効果、アニメーション、オーディオミキシングなどのさまざまな関連作業も請け負うようになりました。アドビでは、こうした他の分野でもエディターが力を発揮できるように、AIの力でクリエイティブなツールセットを拡張して支援します。これにより、クライアントが求めるスケジュールで高品質な成果物を納品できるようになります。
映像のギャップを埋めたり、不要なオブジェクトをシーンから削除したり、ジャンプカットのトランジションをスムーズにしたり、完璧なBロールを検索したりなど、編集作業で頻繁に行われるタスクには時間がかかります。これらのタスクをスムーズに処理できれば、伝えたいストーリー作りに集中でき、魅力的で感情に訴える作品に仕上げることができます。
また、チームや、プロジェクトの承認やステークホルダーとクリエイティブな意図を共有するという重要なタスクも、何往復ものコミュニケーションを要する難しい作業になることがあります。アドビでは、Frame.ioなどのツールを提供し、レビュー・承認プロセスを一元化することでチームワークを効率化します。そして今、ポストプロダクションの作業を効率化し、より優れたクリエイティブプロセスを促進するAIツールを提供しようとしています。アドビのAIツールは、エディターが大規模なチームとのコラボレーションを成功させながら、彼らが最も好きな仕事である新しいクリエイティブなアイデアを探究する時間を増やします。アドビは作業プロセスの合理化を促進するだけでなく、生成AIにより、エディターやモーショングラフィックデザイナーが最高傑作を記録的な速さで制作できるようになるのです。Fireflyを使用して動画編集を新たな高みへと導く様子を、以下でご覧ください。
Firefly「テキストから動画生成」を使用すると、テキストプロンプト、さまざまなカメラコントロール、参照画像を使用して、タイムラインのギャップをシームレスに埋めるBロールを生成できます。
以下に示したすべての生成動画は、アドビのFirefly Video Modelで作成され、2分以内で生成されました。
プロンプト:夕暮れの雪の森にいるトナカイの映画的なクローズアップと詳細なポートレート。照明は映画的でゴージャス、ソフトで太陽の光を浴びたような、黄金色のバックライトと夢のようなボケ味とレンズフレアです。カラーグレーディングは映画的で魔法のようです。
プロンプト:クレーターから溶岩が噴き出す、火山の燃えるような風景のスローモーション。カメラが溶岩の中を飛び、溶岩がレンズに飛び散ります。照明は映画的で、陰鬱な雰囲気です。カラーグレーディングは映画的で、ドラマチックで、ハイコントラストです。
プロンプト:羊毛やフェルトでできた愛らしいモンスターのミニチュアが、互いに踊っている様子、3Dレンダリング、ハイテンション、ソフト照明、夢のようなボケ味、映画的。
Firefly Video Modelは、自然界の動画の生成に優れています。 シーンを構成する重要なショットが撮影されていない場合でも、風景、植物、動物などのインサート映像をカメラモーションを伴って生成することができます。
プロンプト:砂漠の上空を飛行するドローンに搭載されたカメラの映像。風が砂丘を吹き抜け、砂が波打っています。
このような補完ショットが必要な場合、 参照フレームに基づいて生成したクリップでタイムラインのギャップを埋めることができます。
プロンプト:大きな赤い虫メガネを通して見た白いタンポポの非常に詳細なマクロクローズアップビュー
Firefly Video Modelでは、アングル、動き、ズームなどの豊富なカメラコントロールを活用して、生成した動画に完璧な視点を追加することができます。
プロンプト:夕暮れ時の雪の森の木々の間をドローンが飛ぶ。照明は映画のように豪華で柔らかく、黄金色の逆光と夢のようなボケ味とレンズフレアが印象的です。カラーグレーディングは映画的で幻想的です。
プロンプトが詳細であればあるほど、モデルはその情報を汲んで、よりインスピレーションに富んだイメージやBロールを生成することができます。
プロンプト:雨の降る街中を歩く男のクローズアップと詳細なポートレート。照明はムーディーでドラマチックです。カラーグレーディングは青と青緑です。男は非常に現実的で、肌の質感や無精ひげまで細かく表現されています。動きは微妙でソフトです。カメラは動きません。フィルムグレインとテクスチャが粗いです。水滴がゆっくりと彼の顔を伝わっていきます。
Firefly Video Modelは、黒や緑の背景に炎、煙、塵、水などの空気感を表す要素を作成し、ブレンドモードやPremiere ProやAfter Effectsなどのアドビツールが備えるキーイングを使用して既存のコンテンツに重ねるため、幅広いユースケースに対応できます。
2Dおよび3Dアニメーションのアイデア出しにも使えます。例えば、クレイメーションを生成してクリエイティブな共同作業者に作品の意図を伝えることができます。
プロンプト:ストーブの上の美しいキッチンでフライパンで卵を調理する様子をフェルトで作成したコマ撮り2Dアニメーション。.
プロンプト:手描きのシンプルな線画、不思議そうな表情で空を見上げる幼い子供。
プロンプト:月面に浮かぶ微笑む愛らしく可愛いチーズボール、3Dレンダリング、ハイテンション、ソフトライト、夢のようなボケ味、背景に浮かぶ光のきらめき。
クライアントと共有してフィードバックを得るためのカスタムテキストエフェクトのアイデアをブレインストーミングすることもできます。
プロンプト:水しぶきが飛び散り、凍りついて「ICE」という文字が浮かび上がる様子をマクロで詳細に撮影したショット。
「画像から動画生成」を使用すると、既存の静止画やイラストを素晴らしいライブアクションクリップに変換して、命を吹き込むことができます。
プロンプト:銀河をズームアウトすると、それが人間の瞳の瞳孔の中だったことが分かります。詳細なマクロ風景です。
また、年内中にPremiere Pro(ベータ版)に追加される「生成拡張」機能では、クリップを拡張して映像のギャップを埋めたり、トランジションをスムーズにしたり、ショットを延長して完璧なタイミングで編集したりすることができます。
Adobe Firefly Video Modelを搭載したPremiere Proの生成拡張機能を使い、オーディオのクライマックスに合わせてショットを延長する様子をご紹介しています。
生成されたフレームを使って完璧な編集が施された最終出力もご覧いただけます。
Adobe Firefly Video Modelの最新の成果に私たちは興奮しています。コミュニティと協力して、皆さんにご愛用いただいているアドビのツールやワークフローに生成AIを組み込めることを嬉しく思っています。