人工知能

スクリプトからシネマへ:UtopaiのPAIが書かれたストーリーをAI生成映画に変える方法

mm

生成可能AIの急速な進化により、画像、音楽、短いビデオクリップを作成するツールが生まれてきました。しかし、より野心的で、書かれたストーリーを一貫した映画に変えることができる新しいプラットフォームが登場しています。

この分野で最新の参入は、PAIです。これは、Utopai Studiosによって開発された、映画的なストーリーテリングエンジンです。短いビジュアルクリップではなく、ナラティブワークフローに焦点を当てており、クリエイターがスクリプトからキャラクター、ストーリーボード、そして最終的に複数シーンのビデオシーケンスまで、単一のインターフェイス内で移動できるように設計されています。

プラットフォーム内で時間を過ごすにつれて、これらのツールは以前のAIビデオモデルと根本的に異なるものであることが明らかになります。個々のシーンやクリップをプロンプトするのではなく、システムはストーリー自体から始まります。

スクリプトからキャラクターまで

最初のステップは、スクリプトの一部をアップロードすることでした。

プラットフォームの概念は驚くほど直感的です。ユーザーに個々のショットをプロンプトするのではなく、PAIはストーリーを分析し、制作の核心コンポーネントを抽出します。キャラクター、環境、感情のトーン、ナラティブのビートはすべて自動的に識別されます。

そこから、プラットフォームはキャラクターのキャストを構築し始めます。

各キャラクターは、ストーリーに紐付いた永続的な視覚的なアイデンティティを持ち、シーケンス内のすべてのシーンで一貫して現れることができます。这种連続性を維持することは、AIビデオ生成における最大の技術的な課題の1つでした。キャラクターはクリップ間で外見を変え、環境は予測不可能に変化し、ナラティブの流れは崩壊します。

PAIは、キャラクターのデザインとシーンのコンテキストをストーリーの構造自体にアンカーすることでこの問題を解決しようとしています。

初期のキャストが生成されたら、クリエイターは自然言語の指示や視覚的な調整を通じてそれらを改良することができます。キャラクターが創造的なビジョンに合うまでです。この経験は、AIモデルをプロンプトするのではなく、デジタルキャスティングやアート部門と協力するような感覚です。

スクリプトから生成されたストーリーボード

キャラクターが定義されたら、プラットフォームは自動的に次のフェーズ、つまりストーリーボードの作成に移りました。

個々のショットを手動で設計するのではなく、システムはスクリプトを視覚的なストーリーボードに変換しました。画面上にシーンのグリッドが現れ、各シーンはナラティブから抽出された重要な瞬間を表していました。

この段階は、伝統的な映画制作の前制作段階に驚くほど似ていました。監督は、撮影開始前にカメラアングル、テンポ、視覚的な構成を計画するためにストーリーボードを使用します。この場合は、ストーリーボードはスクリプト自体から自動的に生成されました。

各ショットは、自然言語のプロンプトを使用して編集、並べ替え、または改良することができました。シーンに異なるカメラアングル、照明スタイル、または感情のトーンが必要な場合、それらはシステムが最終的なビデオ生成段階に移る前に調整することができました。

ストーリーボードから映画への変換

ストーリーボードが最終化されると、プラットフォームはフルビデオシーケンスを生成しました。

単一のコマンドで、ストーリーボードは複数のシーンから構成されるシネマティックビデオに変換されました。システムは現在、最大16ショット、1分間近い長さのマルチシーンシーケンスをサポートしています。これは、多くの既存のAIビデオツールよりもはるかに長いです。

ほとんどのAIビデオシステムが分離されたクリップを生成する一方で、PAIはシーケンス全体で連続性を維持しようとします。キャラクターはシーン間で認識可能であり、環境は一貫していて、ストーリーは断片的なビジュアルの集まりではなく、一貫したナラティブとして展開されます。

このプロセスを観察することは、ビデオクリップを作成するのではなく、ミニチュアの映画パイプラインを単一のワークフローに凝縮したような感覚です。

初期の限界

全体的な体験は印象的ですが、まだ改善できる点があります。

プロセスの中で驚いたのは、業界標準のスクリプト形式、たとえばFinal Draft (.fdx) やオープンなスクリプト形式Fountainに対するサポートの欠如でした。多くの脚本家が脚本を書く際に使用するこれらの形式のサポートは、プラットフォームをよりプロフェッショナルなライターやスタジオにとって魅力的にするでしょう。

その代わりに、スクリプトはより単純な形式でアップロードする必要がありました。ただし、スクリプトがアップロードされた後、キャラクター生成からストーリーボードの作成、そして最終的なビデオ制作までのプロセスはスムーズで、驚くほど直感的でした。

ストーリーテリングを構築したプラットフォーム

PAIを開発した会社は、このプラットフォームを単なる別の生成可能ビデオツールではなく、位置付けしています。

Utopai Studiosは、プロフェッショナルなクリエイターが長編ストーリーを開発する際に頼るワークフローに特化したAIモデルを開発するために設立されました。

いくつかの重要な設計目標がプラットフォームを形作っているようです:

  • シーン間で視覚的な連続性を維持する
  • クリエイターがストーリーエレメントを編集できるようにする、生成プロセス全体をやり直す必要がない
  • 著作権で保護されたキャラクター、知的財産、または実在の公人の似姿の作成を防ぐ
  • 実験的なプロトタイプではなく、公開に適した出力を提供する

このアプローチは、AIビデオが進化しているより広いトレンドを反映しています。初期のツールは主に短いクリップや実験的なビジュアルの生成に焦点を当てていました。次の波のプラットフォームは、より困難な課題である持続可能なストーリーテリングに取り組み始めています。

映画制作の未来への一瞥

PAIのようなプラットフォームが魅力的であるのは、書かれたアイデアがどれほど速く視覚的なものになるかを見せるからです。

テキストのみで存在していたストーリーが、突然キャラクター、シーンのシーケンス、そして最終的に短い映画になることができます。チームのアーティスト、エディター、制作クルーが必要だったものが、単一のスクリプトと数つの創造的なプロンプトから始まることができます。

これは、AIが映画製作者を置き換えることを意味しません。代わりに、これらのツールはストーリーを初期開発段階で探索する方法を大幅に拡大する可能性があります。

脚本家は、ピッチする前にシーンを視覚化できます。監督は、プレプロダクション中にさまざまな視覚的なスタイルを実験できます。インディーズクリエイターは、伝統的なスタジオリソースにアクセスする必要なく、シネマティックなコンテンツを制作できます。

多くの方面で、これらのプラットフォームはデジタル映画制作やデスクトップパブリッシングの初期の日々に似ています。創造的な生産の障壁を大幅に低減した技術です。

新しいクリエイティブエコシステムの始まり

AIビデオ生成が改善され続けるにつれて、ナラティブストーリーテリングではなく、分離されたクリップに焦点を当てたプラットフォームがさらに登場する可能性があります。

スクリプトからスクリーンへのワークフロー、キャラクタージェネレーション、バーチャルシネマトグラフィー、自動編集パイプラインなどのツールが登場します。これらはすべて、AIネイティブ映画制作を中心とした新しいクリエイティブエコシステムを形成する可能性があります。

すでに、このシフトの初期の兆候が見られます。AI生成映画やシリーズを専門とする配信ネットワークを実験するプラットフォームが登場しています。これらの初期の努力は、Netflixスタイルの環境がAI生成ビデオコンテンツのために構築されているEscape.aiのようなサービスを通じて、シネマがどのように進化するかを垣間見ることができます。

テクノロジーはまだ初期段階ですが、方向性は明らかです。分離されたクリップを生成していたツールが、フルクリエイティブパイプラインに進化し始めています。

PAIのようなプラットフォームが改善し続けるなら、スクリプトからシネマへの旅は、以前よりもはるかに速く、より多くのストーリーテラーにアクセス可能になる可能性があります。

アントワーヌは、Unite.AIの創設パートナーであり、ビジョナリーなリーダーです。彼は、AIとロボティクスの未来を形作り、推進するという、揺るぎない情熱に突き動かされています。シリアルエントレプレナーである彼は、AIは電気と同じように社会に大きな変革をもたらすと信じており、破壊的な技術やAGIの潜在能力について熱く語ることがよくあります。

As a futurist、彼は、これらのイノベーションが私たちの世界をどのように形作るかを探求することに尽力しています。さらに、彼は、Securities.ioの創設者であり、未来を再定義し、全セクターを再構築する最先端技術への投資に焦点を当てたプラットフォームです。