Adobeは本日、AI生成ビデオ(別名Fireflyビデオモデル)をAdobe Premiere ProとFireflyジェネレーティブアートサービスに導入すると発表しました。ただし、同社のAI画像生成機能とは異なり、これは無料ではありません。
AI生成動画は数ヶ月前から利用可能になっています。OpenAIは12月、テキストプロンプトから数秒のAI動画クリップを作成できる機能「Sora」をリリースしました。Adobeが提供しているのは、その信頼性です。FireflyやPhotoshopのAI生成画像と同様に、AdobeはFirefly動画モデルをライセンス供与されたクリップで学習させました。
現在、AdobeはAI生成のビデオクリップをBロールとして位置付けています。例えば、タイトルの後ろのつなぎ動画のようなものです。また、2つの異なるシーン間のトランジションをスムーズにするのにも役立ちます。
報道陣に提供されたデモでは、アイスランドの映像を紹介するタイトル画面の背景として、AIが生成した真っ赤な火花が画面を飛び交う映像を想定されていました。しかし、アドビは同じプロジェクトで、噴火する火山の上空を飛ぶ「ドローン飛行」もAIが完全生成して披露しており、視聴者は見たものの信憑性に疑問を抱くことになるでしょう。
Adobe Fireflyモデルはビデオを生成・ダウンロードできます。Premiere Proでは、Photoshopと同様に、ユーザーはアプリ内でAI生成コンテンツを生成し、それをワークフローに簡単に組み込むことができます。

アドビ
Adobe Firefly Video の価格はいくらですか?
ただし、AdobeのFireflyビデオモデルを利用するには料金がかかります。Adobeは2つのプランで早期アクセスを提供しています。9.99ドルのFireflyスタンダードプランでは、月額2,000ビデオクレジット、または5秒間の1080pビデオを最大20本まで作成できます。Fireflyプロプランでは、月額7,000ビデオ/オーディオクレジットを使用して、5秒間の1090pビデオを最大70本作成できます。Adobeによると、「定期的にビデオコンテンツを制作したい」ユーザー向けのFireflyプレミアムプランも開発中とのことですが、価格は未発表です。
このプランは一見少し分かりにくいように思えるが、Adobeの担当者にプランの説明を求めたところ、基本的にはクレジットを使って動画を「購入」することになるという。動画の作成だけでなく、フィルターを適用したり、カメラのパスを設定してモーションショットを作成したりといった編集機能も備わる。Adobeによると、クリエイターは動画の最初と最後の画像をロックしてトランジションをスムーズにしたり、シーン内の他のクリップとの一貫性を保つために色を調整したりすることもできるという。これらの機能にクレジットはかからないようだ。
編集と再レンダリングの境界線がどこに引かれるかは明確ではありませんが、再レンダリングにはクレジットがかかります。
「例えば、競馬場のインフィールドに立っている人の視点から、一群の馬が競馬場を駆け回るシーンを撮影してほしいと依頼したとします」と、私はAdobeの担当者にメールで尋ねました。「その後、このシーンではうまくいかないと判断し、カメラを頭上からインフィールドに移動する俯瞰ショットを希望しました。これは編集とみなされるのでしょうか、それとも全く別のレンダリングとみなされるのでしょうか?」
「これは新しいレンダリングとみなされ、追加の生成が必要になるためクレジットが使用されます」とAdobeの担当者は回答しました。

アドビ
ただし、AdobeはAIを使って音声を生成するわけではありません。代わりに、Adobeは事前に録音された音声を20の言語に翻訳することを提案しています。Adobeは、翻訳において声、トーン、リズム、音響のマッチングなど、「本物の音声」が維持されることを約束しています。
AI生成の動画は静止画よりもはるかに計算負荷が高いため、Adobeが料金を値上げするのは当然のことです。Adobeは既にAI画像用のクレジットシステムを導入しており、FireflyはAdobeアプリの無料版にサインアップしたユーザーに25クレジットしか画像生成クレジットとして割り当てていません。動画モデルに関しては、AdobeはまだFirefly Videoモデルを無料プランで試用できるようにしていません。
明確でないのは、ユーザーが利用可能なクレジットを「使う」のか、それともビデオ作成時間の購入にのみ使用されるのかということです。

アドビ
Adobeには、この分野での競合が存在します。クラウドサービス経由でAI生成動画を作成できるサービスは、Sora、Pika Labs、Runwayなど、数多く存在します。Invideo.aiのようなサービスでは、AI生成クリップ(ストック画像も含む)とAI生成スクリプトを用いて、動画セグメント全体をゼロから作成するサポートも提供しています。
ローカルPCでAI動画を作成することも、かろうじて可能のようです。Mochiのドキュメントによると、PCで480p動画を生成するには60GBのVRAMが必要です。これは、Nvidia GeForce 5090 Founder's Editionの32GBのVRAMよりも大きいです。他の競合製品も、それほど優れているようには見えません。
ローカルAIビデオモデルは、テキストプロンプトからではなく参照画像からビデオクリップを作成するのに苦労しているようです。AdobeのFireflyモデルは両方に対応しています。Stable DiffusionのようなAIジェネレーターをPC上で実行することは、AI生成の静止画であればかなり現実的に思えますが、この世代のPCではAIビデオはクラウドを利用せざるを得ないかもしれません。
Adobeはクラウドサービスでまさにその力を提供しています。長期的には、利便性こそが真のセールスポイントになるかもしれません。AdobeのFireflyサービスはAIアートを手軽に作成できるアプローチを提供していますが、特に便利なのはPhotoshopとの容易で緊密な統合です。Premiere ProとAdobeの新しいビデオモデルにも同様の機能が期待できます。
このストーリーは2月12日午前9時25分に更新されました。