Twelve Labsで映画制作を加速させる

変化の激しい映画制作の世界では、時間が最も重要です。最も労働集約的な作業の1つは、毎日のラッシュ、つまり「デイリー（毎日撮影される未編集の素材映像）」の管理です。これらのデイリーを整理する作業は、時間と手間の両方がかかります。従来、制作チームは手作業で何時間もの映像を精査し、ロケーション、キャラクター、アクションなどの基準に基づいてシーンを分類し、ビンに整理していました。この手作業のプロセスは、制作パイプラインを停滞させ、最終カットに最適なテイクを選択するなどの重要な決定を遅らせる可能性があります。

Twelve Labsでは、ビデオコンテンツを深いコンテキストレベルで理解する高度なAIモデルを開発しています。これらのモデルをワークフローに統合することで、映像の整理や予備編集を自動化でき、生のデイリーから編集可能なタイムラインへと、より効率的に移行できるようになります。

Marengo

当社のマルチモーダルビデオ理解モデルであるMarengoは、取り込まれたデイリーを自動的にインデックス化して分析するために活用できる、強力なツールとして機能します。視覚的、聴覚的、そしてコンテキスト要素を検証することで、Marengoは極めて高い精度で映像を分類するソリューションを開発者が作成できるようにします。

Marengoを使用すると、ロケーション、キャラクター、アクションなどの基準に基づいて、シーンを事前定義されたビンに分類するアプリケーションを構築できます。たとえば、架空の中世を舞台にした叙事詩『ゲーム・オブ・スローンズ』のような作品では、「戦闘シークエンス」「王座の間での会話」「屋外シーン」といったビンにシーンを自動分類することができます。

この自動化により、エディターやディレクターは関連する映像に迅速にアクセスできるようになり、手作業での整理や特定のテイクの検索に費やす時間を削減できます。

Pegasus

当社の生成モデルであるPegasusは、分類されたビン内の各ビデオに対して、要約、チャプター、主要なハイライトを生成することで、レビュープロセスをさらに強化します。たとえば、Pegasusは「戦闘シークエンス」ビン内のすべてのテイクの短い概要を生成し、特定の剣劇や感情的なクローズアップなどの重要な瞬間をハイライトすることができます。

これにより、ディレクターはデイリーを迅速に確認し、重要なシーンに焦点を当て、何時間もの映像を詳しく調べることなくフィードバックを提供できます。また、AIがすでに映像を整理して優先順位を付けているため、エディターもよりスムーズにラフカットの作成に着手できます。

Jockey

‍Jockey、これこそが本当に面白いところです。Jockeyはオープンソースの対話型ビデオエージェントであり、当社のモデルをどのように活用して革新的なソリューションを生み出せるかを示しています。Twelve Labsの強力なビデオ理解APIとLangGraphの柔軟なフレームワークを使用して構築されたJockeyは、ビデオ編集プロセスの効率化における当社の技術の可能性を提示しています。

Jockeyを使用すると、ユーザーは自然言語のプロンプトを通じてビデオコンテンツとやり取りできます。欲しいシーンやシーケンスを説明するだけで、Jockeyがラフカットを構築し、EDLとしてタイムラインに直接インポートできます。 

オープンソースプロジェクトとしてのJockeyは、制作の具体的なニーズに合わせてカスタマイズや拡張が可能です。これはTwelve Labsのモデルを使用して構築されたソリューションの柔軟性を際立たせています。

Twelve Labsでは、クリエイティビティが映画制作の核心であることを理解しています。当社のAIモデルは、クリエイティブなプロセスを代替するのではなく、支援するように設計されています。デイリー管理の退屈な側面を自動化することで、Twelve Labsはディレクター、エディター、その他のクリエイターが、独自の魅力的なストーリーを構築するという、最も得意なことに集中できる時間を増やします。

AIはクリエイティブな意思決定を行いません。その代わりに、より整理され、効率的なワークフローを提供することで、クリエイティブなプロセスを強化します。その結果、制作パイプラインが迅速化、効率化されながらも、映画制作者のビジョンと芸術性に深く根ざした状態を維持できます。

あなたが『ロード・オブ・ザ・リング』のような大規模なファンタジー映画に取り組んでいると想像してください。毎日、チームは広大な戦場から親密な会話シーンまで、さまざまなロケーションから何時間ものデイリーを生成します。

• シーン分類: Marengoはこれらのシーンを「オークの戦い」「森の待ち伏せ」「評議会」などのビンに自動的に分類します。

• フォルダーの整理: 「オークの戦い」ビンの内部では、映像はさらに「剣劇」や「射手のカット」などの特定のアクションシーケンスに基づいて整理されます。

• レビュープロセス: Pegasusは各ビデオの重要な瞬間を要約したハイライトリールを生成し、ディレクターが次の編集ステージに進むための最適なテイクを素早く確認、承認できるようにします。

Twelve Labsを使用することで、制作チームは何時間もの手作業を削減でき、物語の洗練やビジュアルストーリーテリングの向上に集中することができます。その結果、クリエイティブな品質を損なうことなく、制作タイムラインを短縮できます。

Twelve Labsは単なるAIモデリング会社ではなく、皆さんのクリエイティブな旅のパートナーです。ありふれた作業を自動化し、本質的な部分を強化することで、当社のAI技術は、映画制作者がより迅速に編集に移り、自身のクリエイティブなビジョンを守り、高品質なコンテンツをより速く制作できるよう支援します。大規模なファンタジー叙事詩であれ、小さなインディーズドラマであれ、Twelve Labsは魔法が効率的に起こることを保証します。

Twelve Labsで映画制作の未来を体験してください。AIが芸術性を後押しします。