メタは新しいAIモデル映画遺伝子を発売し、音声でビデオを作成できます

ジャカルタ - Facebookの親会社であるMeta Platform Inc.は、10月4日金曜日、Movie Genと呼ばれる新しいAIモデルを開発したと発表しました。このモデルは、ユーザーのコマンドに基づいてリアルなビデオクリップとオーディオクリップを作成することができます。このツールは、OpenAIやElevenLabsなどの大手スタートアップが開発したジェネレーティブメディアツールと競合します。

Metaが共有した例では、Mobile Genは水泳やサーフィンの動物のビデオや、キャンバスに描くなどの活動を説明するために人々の元の写真を使用するビデオを制作しています。Movie Genは、ビデオのコンテンツと同期した背景音楽やサウンドエフェクトを作成することもできます。

🎥 Today we’re premiering Meta Movie Gen: the most advanced media foundation models to-date.

Developed by AI research teams at Meta, Movie Gen delivers state-of-the-art results across a range of capabilities. We’re excited for the potential of this line of research to usher in… pic.twitter.com/NDOnyKOOyq

— AI at Meta (@AIatMeta) October 4, 2024

今日、私たちはメタムービー世代をプレミア公開しています:最新の最も先進的なメディアファンディションモデル。

MetaのAI研究チームによって開発されたMovie Genersは、幅広い能力を備えた最先端の状態の結果を提供します。私たちは、ウシェールでこの一連の研究の可能性に興奮しています...pic.twitter.com/NDOnyKOO

新しい動画の作成に加えて、このツールを使用して既存の動画を編集することもできます。編集されたビデオの1つは、Movie Genが砂漠を走る男性の手にポンプを追加していることを示していますが、別のビデオでは、誰かがスケートボードをプレイするときに、このツールは乾燥した駐車場を水たまりに変えます。

Metaによると、Movie Genによって生成されたビデオの長さは最大16秒ですが、オーディオは最大45秒です。実施された盲目的なテストは、Movie GenのパフォーマンスがRunway、OpenAI、ElevenLabs、Klingなどの他のスタートアップの製品と競合していることを示しました。

この発表は、AIジェネレーティブビデオテクノロジーを活用する方法に関するハリウッドの議論の中で行われました。エンターテインメント業界の一部の技術者は、映画制作をスピードアップするためにこのツールを使用することに熱心ですが、他の人は許可なく著作権で訓練されているように見えるシステムの使用を心配しています。

Metaは、リリースされたLlamaシリーズの主要な言語モデルとは対照的に、Movie Genを開発者に公開する予定はないと述べた。しかし、Metaはエンターテインメントコミュニティやコンテンツクリエイターと直接協力しており、Movie Genは来年Meta製品に統合される予定です。

メタは、映画遺伝子を開発するために、ライセンスされたデータセットと公開されているデータセットの組み合わせを使用しています。一方、OpenAIはハリウッドの幹部やエージェントと同様の製品のパートナーシップの可能性について話し合ったと伝えられているが、まだ契約は発表されていない。