動画生成
Topview、ハイブリッド映画制作向けにAI照明調整・編集ツールを追加

要点Topviewは、シーン全体をゼロから生成するのではなく、既存の映像の修復を対象としています。
もっと見る
- Topviewは、シーン全体をゼロから生成するのではなく、既存の映像の修復を対象としています。
- Video Relightは、曖昧なテキストプロンプトではなく、明示的な3Dライティングコントロールを提供します。
- 合成されたカメラアングルは、周囲の映像と説得力をもって切り替わる場合にのみ機能します。
Topviewは、実写映像の照明調整、選択的な編集、新たなカメラアングル、背景の差し替えなどを行うAIポストプロダクション機能を追加し、ハイブリッド映画制作ツールを拡充する。スイートの照明機能であるVideo Relightは、11月19日に提供開始となる。
このアプローチは、映画制作者がすでに撮影した素材を起点とする。すべてのシーンを一から生成するのではなく、既存のショットの構図や映像の連続性を保ちながら、編集者がそのショットを修正したり、内容を拡張したりできるよう支援することをTopviewは目指している。
これは、単独のAI動画クリップを作成するのとは異なる制作上の課題だ。編集をうまく仕上げるには、俳優の演技やカメラワーク、前後のショットとの整合性が求められる。これらのツールの価値は、変更したい要素を映画制作者がどれだけ細かく制御できるかによって決まる。
撮影後にショットの照明を調整
Video Relightでは、3D照明インターフェースを使って、ライトの数や、それぞれの角度、色温度、距離、柔らかさ、強度を調整できる。石膏球を使ったリアルタイムプレビューで照明の配置を確認してから、生成を実行できる。
こうした操作項目により、「このシーンをもっと暖かい色調に」といったプロンプトよりも、意図する効果を明確に指定できる。色温度を変えると光の暖かさや冷たさの印象が変わり、柔らかさは光と影の境界のなめらかさに影響する。また、光源の位置を変えると、被写体に当たる光の広がり方が変わる。
球体のプレビューは照明の配置を確認するためのものであり、動画全体がリアルタイムで再生成されるという意味ではない。最終的なショットでは、動きや被写体の見え方の変化を通じて、照明の配置が一貫して保たれる必要がある。
Topviewは、時刻や天候、月の満ち欠けを変えられるChange Time & Weatherツールも紹介している。撮影時の屋外環境が異なる映像の条件をそろえる用途から、ロケ撮影では容易に再現できない環境を作り出す用途までを想定している。
ショット全体を作り直さず、選択した要素を編集
Video Element Editでは、テキストプロンプト、選択ボックス、クリック、ブラシによる選択など、複数の方法で対象を指定できる。同社によると、このツールは選択範囲以外に影響を与えずに調整できるよう設計されている。
Topviewの既存の動画編集ワークフローでも、修正が必要な場面を選び、自然言語の指示や参照画像を使って変更内容を指定することが重視されている。新しいツール群は、こうした対象を絞った編集の考え方を、より多くの映画制作作業へと広げるものだ。
Layer Editは、別の方法で関連する課題に取り組む。動画を複数の要素に分け、クリエイターがそれぞれを移動、拡大縮小、描き直し、編集できるようにする。これにより、フレーム全体を切り離せない一枚の画像として扱わずに、構図を調整したり、不要なものを取り除いたりできる可能性がある。
実用上の違いは、位置と持続時間の両方を制御できることにある。あるフレームでオブジェクトを選択するのは出発点にすぎず、俳優やカメラが動いても、変更箇所が適切な要素に追従し続けなければならない。映画制作者にとって、静止画の仕上がりがきれいでも、動画の動きの中で自然につながらなければ意味がない。
新たなアングル、エキストラ、背景
Camera Angle Presetsは、既存の実写映像から別の視点の映像を生成する。Topviewは、撮影現場に戻るのが現実的でない場合に、撮り損ねたショットを補う手段として位置づけている。
合成されたアングルはシーンを新たに解釈したものとなるため、編集者は元のショットと照らし合わせて評価する必要がある。登場人物の外見や位置、小道具、照明、動きの方向はいずれも、前後の映像と違和感なくつながるかどうかを左右する。
Add Extrasでは、AIが生成した背景の出演者をシーンに配置し、立ち位置や動作を指定できる。Topviewによると、同じ人物が目立って繰り返されるのではなく、多様な群衆を作り出せるよう設計されている。
背景関連のツールは、2種類の制作状況に対応する。Replace Green Screenは、髪の毛や半透明の素材、グリーンバックの色かぶりといった処理が難しい境界部分も含め、合成を自動化することを目的としている。Replace Backgroundはグリーンバックを使わずに動作し、ロケーションの一部を差し替えたり、拡張したりできる。
時代劇のシーンなら、屋外ショットから現代的な建物を取り除く、といった使い方が考えられる。狭い場所で撮影した作品なら、映像上の舞台を広げることもできる。いずれの場合も、差し替えた背景がなじむかどうかは、被写体の照明とシーンの遠近感を一致させられるかにかかっている。
より幅広いAI動画プラットフォームの一部
Topviewのウェブサイトによると、同社のエージェント型制作プラットフォームでは、シーンの計画、モデルの選択、素材の生成ができ、Canvasワークスペース内でショットを編集可能な状態に保てる。同社は、短編映画、マーケティング動画、マイクロドラマにまたがるサービスを、モデルと素材の管理機能とともに同じ環境で提供している。
ハイブリッド映画制作ツールは、このプラットフォームに新たな制作経路を加える。実際の俳優を撮影した映像を素材として使い、AIはポストプロダクションにおける個別の判断に活用される。
同社を率いるのは、共同創業者兼CEOのJensen Wuと、共同創業者兼CTOのAlbert Chenです。提供された創業者の略歴によると、2人ともTaobaoのショート動画プラットフォームに携わっており、動画に関するプロダクト開発とエンジニアリングの経験を、Topviewの映像制作への取り組みに生かしています。
演技を調整する機能はまだ登場していない
さらに3つの機能が近日公開予定として挙げられています。「視線の調整」では、視覚的な3D頭部モデルを使って演者の視線を変えられるようになります。「微細な表情の調整」では、表情を操作するための3D顔面インターフェースが提供されます。「演技の強調」では、実写をアニメ風に変換する際に、表情やボディランゲージをより際立たせることができます。
これらは、11月19日に公開されたVideo Relightとは別の機能です。また、演技そのものにより深く踏み込むもので、小さな変更によってシーンの意味や感情の流れが変わることもあります。
映画制作者にとって、すぐに得られる利点は、手元にある映像をより細かく制御できることです。照明を変えたり、局所的な細部を修正したり、背景を拡張したり、別の視点を試したりできます。ただし、それによってショットを救えるかどうかは、出力が編集時に元の素材と並べても違和感のない一貫性を保てるかにかかっています。












