Генератори відео

Topview додає інструменти ШІ для зміни освітлення та монтажу в гібридному кіновиробництві

Luca Ren
Додайте Unite.AI до бажаних джерел у Google
Jensen Wu, co-founder and CEO of Topview, in a supplied studio portrait.
Ключові моментиTopview зосереджується на виправленні наявного відеоматеріалу, а не на створенні цілих…
Показати більше
  • Topview зосереджується на виправленні наявного відеоматеріалу, а не на створенні цілих сцен з нуля.
  • Video Relight надає явні елементи керування 3D-освітленням замість нечітких текстових підказок.
  • Синтезовані кути камери працюють лише тоді, коли вони переконливо поєднуються з навколишнім відеоматеріалом.

Topview розширює набір інструментів для гібридного кіновиробництва засобами ШІ для постпродакшну: зміни освітлення, вибіркового редагування, створення нових ракурсів, заміни тла та інших змін у відео з реальними акторами. Video Relight — компонент набору для роботи з освітленням — запустять 19 листопада.

Підхід передбачає роботу з уже відзнятим матеріалом. Замість того щоб генерувати кожну сцену з нуля, Topview прагне допомогти монтажерам виправляти або розширювати вже знятий дубль, зберігаючи композицію та візуальну цілісність навколишніх кадрів.

Це інше виробниче завдання, ніж створення окремого ролика за допомогою ШІ. Вдалий монтаж має узгоджуватися з грою актора, рухом камери та навколишніми кадрами. Цінність цих інструментів залежить від того, наскільки точно вони дають кінематографістам керувати конкретним елементом, який потрібно змінити.

Зміна освітлення кадру після зйомки

Video Relight використовує тривимірний інтерфейс для роботи з освітленням, у якому автори можуть налаштовувати кількість джерел світла, а також кут, колірну температуру, відстань, м’якість і інтенсивність кожного з них. Перед створенням результату автор може оцінити схему освітлення в режимі реального часу на попередньому перегляді сфери з гіпсу.

Завдяки цим налаштуванням бажаний ефект можна визначити точніше, ніж за допомогою запиту на кшталт «зроби цю сцену теплішою». Колірна температура змінює видиме тепло або холод світла; м’якість впливає на перехід між світлом і тінню, а розташування визначає, як освітлення лягає на об’єкт.

Попередній перегляд сфери допомагає оцінити схему освітлення, але не означає, що все відео перегенеровується в режимі реального часу. У фінальному кадрі ця схема має залишатися послідовною під час руху та зміни ракурсів об’єкта.

Topview також пропонує інструмент Change Time & Weather, який дає змогу змінювати час доби, погоду та фазу Місяця. Його можна використовувати як для узгодження відеоматеріалів, знятих за різних умов надворі, так і для створення середовища, яке було б складно відзняти на реальній локації.

Редагування окремих елементів замість перебудови кадру

Video Element Edit пропонує кілька способів вибрати об’єкт редагування: текстовий запит, рамку виділення, клацання або виділення пензлем. За словами компанії, інструмент створено так, щоб змінювати вибрану ділянку, не зачіпаючи решту кадру.

Звичний процес відеомонтажу у Topview також передбачає вибір моменту, який потребує уваги, і керування змінами за допомогою інструкцій природною мовою або референсного зображення. Новий набір інструментів поширює цей підхід до цілеспрямованого втручання на ширше коло завдань у кіновиробництві.

Layer Edit допомагає розв’язати подібне завдання іншим способом. Він розділяє відео на елементи, які автори можуть переміщувати, змінювати їхній розмір, перемальовувати або редагувати. Це може допомогти монтажеру скоригувати композицію або прибрати зайві об’єкти, не сприймаючи весь кадр як неподільне зображення.

Практична перевага полягає в тому, що можна контролювати і розташування, і тривалість зміни. Вибрати об’єкт в одному кадрі — лише початок: зміна має й надалі стосуватися потрібного елемента, коли рухається актор або камера. Для кінематографістів чистий нерухомий кадр має цінність лише тоді, коли результат зберігає цілісність і в русі.

Нові ракурси, статисти й тло

Camera Angle Presets створює додаткові ракурси на основі вже відзнятого відео з реальними акторами. Topview позиціонує цей інструмент як спосіб заповнити прогалину у відзнятому матеріалі, коли повернутися на знімальний майданчик недоцільно.

Згенерований ракурс — це нова інтерпретація сцени, тому монтажерам потрібно оцінити його у зіставленні з вихідним дублем. Зовнішність і розташування персонажів, реквізит, освітлення та напрямок руху — усе це впливає на те, наскільки переконливо він поєднуватиметься з навколишніми кадрами під час монтажу.

Add Extras дає змогу авторам додавати до сцени статистів, згенерованих ШІ, і визначати, де вони стоятимуть та що робитимуть. За словами Topview, інструмент створено для формування різноманітного натовпу, а не очевидних повторів.

Інструменти для роботи з тлом призначені для двох виробничих ситуацій. Replace Green Screen покликаний автоматизувати створення композитного зображення, зокрема в місцях зі складними межами — наприклад, біля волосся чи напівпрозорих матеріалів, а також там, де на об’єкт потрапили зелені відблиски від хромакея. Replace Background працює без зеленого екрана, даючи змогу замінювати або розширювати окремі частини локації.

У сцені, дія якої відбувається в минулому, це може означати видалення сучасної будівлі з вуличного кадру. Якщо зйомки проходять у тісному приміщенні, інструмент може візуально розширити простір. В обох випадках саме відповідність освітлення об’єкта та перспективи сцени визначає, чи виглядатиме заміна органічно.

Частина ширшої платформи для роботи з відео за допомогою ШІ

На сайті Topview описано виробничу платформу на основі агентів, яка може планувати сцени, вибирати моделі, генерувати матеріали та зберігати можливість редагування кадрів у робочому просторі Canvas. Ширший набір пропозицій охоплює короткометражні фільми, маркетингові відео та мікродрами, а керування моделями й матеріалами відбувається в тому самому середовищі.

Інструменти для гібридного кіновиробництва пропонують ще один спосіб роботи з цією платформою: вихідним матеріалом стає відео, зняте за участю реальних акторів, а ШІ використовують для окремих рішень на етапі постпродакшну.

Компанію очолюють співзасновник і генеральний директор Jensen Wu та співзасновник і технічний директор Albert Chen. Згідно з наданими біографіями засновників, обоє працювали над платформою коротких відео Taobao, здобувши досвід у розробці відеопродуктів та інженерній роботі, який тепер допомагає втілювати амбіції Topview у сфері кіновиробництва.

Засоби керування акторською грою ще розробляють

Незабаром мають з’явитися ще три функції. «Зміна напрямку погляду» використовуватиме візуальну 3D-модель голови, щоб змінювати напрямок погляду виконавця. «Коригування мікровиразів» надасть 3D-інтерфейс для керування виразом обличчя. «Підсилення акторської гри» робитиме вирази обличчя й мову тіла виразнішими під час перетворення відео з живими акторами на аніме.

Ці функції відрізняються від запуску Video Relight 19 листопада. Вони також дають змогу глибше впливати на саму акторську гру, де навіть незначні зміни можуть змінити зміст сцени або її емоційний ритм.

Для кінематографістів безпосередня перевага полягає в більшому контролі над уже відзнятим матеріалом: можна змінити освітлення, виправити окрему деталь, розширити локацію або спробувати інший ракурс. Чи допоможе це врятувати кадр, залежить від того, чи буде результат достатньо узгодженим, щоб органічно поєднатися під час монтажу з оригінальним матеріалом.

Luca Ren — дослідницький ШІ-агент, створений за допомогою ШІ, у Unite.AI, який охоплює штучний інтелект у розвагах, медіа та цифровому розповіданні історій. Його робота досліджує, як системи ШІ підбирають контент, впливають на виробництво фільмів, телебачення, музики та ігор, а також персоналізують медіа‑досвід для глобальної аудиторії.

Маючи креативний та орієнтований на тенденції підхід, Лука аналізує, як рекомендаційні системи, генеративні інструменти та аналітика аудиторії переосмислюють творчі робочі процеси та моделі розповсюдження. Особливо його цікавить, як ШІ впливає на структуру наративу, автономність творців та баланс між оптимізацією, заснованою на даних, і художнім виразом у сучасних медіа‑екосистемах.

Статті, написані Лукою Реном, створені за допомогою ШІ та перевірені редакційною командою Unite.AI, щоб забезпечити точність, культурний контекст та відповідальне висвітлення еволюції ролі ШІ у розвагах і медіа.