Connect with us

Інструменти ШІ 101

TikTok представляє Boximator для контролю руху

mm

Чи знали ви, що TikTok представив нову функцію контролю руху під назвою Boximator? Це інструмент штучного інтелекту для створення чудових відеороликів з гладким контролем руху. Boximator працює як ваш особистий редактор відео і може покращити анімацію ваших відео.

Якщо вам подобається створювати відео, Boximator дасть вам більше контролю над ними завдяки функціям просунутого відстеження руху та розпізнавання жестів. Інструмент спрощує процес створення професійних відеороликів з просунутим відстеженням руху та розпізнаванням жестів.

З Boximator ви можете створювати професійні відеороліки з привабливими рухами, навіть якщо ви новачок у відеомонтажі. Давайте обговоримо Boximator і те, як він може покращити ваш досвід роботи з TikTok.

Що таке Boximator?

ByteDance, компанія, яка володіє TikTok, розробила Boximator. Він використовує новий тип моделі архітектури під назвою PixelDance, яка покращує відеомоделі дифузії з тонким контролем руху. Boximator може ідентифікувати об’єкти у відео, аналізуючи кадри відео. Потім він використовує модель PixelDance для створення гладкої траєкторії руху для кожного об’єкта. Це дозволяє вам створювати відеороліки з гладким контролем руху без необхідності ручної настройки кожного кадру.

Джерело зображення 

Boximator дозволяє користувачам створювати відеоефекти, такі як повільний рух і гіперлапс. Для використання Boximator вам потрібно просто завантажити ваше відео до додатка TikTok. Boximator автоматично проаналізує ваше відео і створить гладку траєкторію руху для кожного об’єкта у відео. Крім того, ви можете використовувати контроли Boximator для настройки траєкторії руху та створення бажаного ефекту.

Ключові функції та функціональність

Boximator пропонує різні функції для створення відео. Ось деякі з його ключових функцій:

1. Інтуїтивна специфікація руху

Boximator пропонує функції специфікації руху. Користувачі можуть легко вибирати об’єкти у відео, малюючи навколо них коробки. Замість написання складних інструкцій користувачі можуть просто використовувати коробки та лінії, щоб показати, куди вони хочуть рухати об’єкт.

2. Тверді коробки та м’які коробки

Boximator використовує два типи коробок для контролю руху: тверді коробки та м’які коробки. Тверді коробки визначають точні позиції та форми об’єктів у різні моменти відео. Натомість м’які коробки дозволяють більш гнучкий рух. Ці коробки допомагають користувачам створювати більш природні та динамічні анімації.

3. Архітектура плагіна

Boximator також працює як плагін. Його можна додати до існуючих моделей синтезу відео без зміни їхніх основних функцій для навчання спеціального модуля контролю. Цей спеціальний модуль потім допомагає покращити відео без впливу на їхню оригінальну якість. Отже, користувачі мають більше гнучкості для експериментів з новими функціями.

4. Просунута продуктивність

Boximator може допомогти створити відеороліки з високим контролем руху. Інструмент досяг вищого балу Frechet Video Distance (FVD) порівняно з іншими базовими моделями. Це тому, що Boximator використовує просунутий алгоритм з покращеними метриками вирівнювання обмежувальних коробок, які точно передбачають рух об’єктів у відео. Таким чином, користувачі можуть створювати чіткі та привабливі відеороліки, які виглядають професійно.

5. Самостійне попереднє навчання

Інструмент використовує просту техніку само-відстеження, яка спрощує метод кореляції коробки-об’єкта. Це означає, що він вчиться ідентифікувати та відстежувати об’єкти у відео, генеруючи коробки навколо них. Крім того, модель навчена зупиняти генерацію видимих коробок, зберігаючи внутрішні представлення для подальшого контролю руху. Отже, Boximator вчиться створювати гладкий контроль руху без необхідності ручного навчання на кожному відео.

Застосування та вплив Boximator

Boximator пропонує ряд цікавих можливостей для відеокреаторів. Він може зменшити обчислювальні ресурси, необхідні для вивчення тонкого контролю руху. Таким чином, творці можуть створювати високодеталізовані анімації навіть без потужного обладнання.

Boximator пропонує точний і надійний контроль руху об’єктів для творців контенту. Ця функція додає вартість до анімованих зображень і робить створення реалістичних та привабливих відеороліків більш зручним.

Крім того, Boximator добре справляється з складними сценаріями. Він може обробляти багато складових елементів і дозволяє творцям контенту керувати кількістю елементів та їхнім розташуванням у сцені. Ця функціональність важлива для створення анімацій та динамічних відеоефектів.

Джерело зображення

Крім того, цей інструмент ідеальний для тих, хто хоче зробити свої відеороліки більш професійними. Чи ви TikTok-зірка, кінорежисер чи просто людина, яка любить ділитися веселими відео з друзями, Boximator може допомогти вам створити чудовий контент.

Доступність та майбутні перспективи

Демо-сайт Boximator знаходиться у стадії розробки. Однак ранні канали досвіду доступні для тестування та відгуку. TikTok планує зробити цей інструмент широко доступним для покращення досвіду створення відео для всіх користувачів.

У майбутньому Boximator можна інтегрувати з різними платформами, включаючи TikTok. Ця інтеграція зробить просунуті функції відеомонтажу доступними для більш широкої аудиторії, і ми можемо очікувати побачити чудові анімації та відеороліки.

Хочете залишатися в курсі інновацій у сфері штучного інтелекту? Слідкуйте за unite.ai для ознайомлення з останніми досягненнями у сфері творчої технології.

Haziqa є вченим-даними з великим досвідом написання технічного контенту для компаній AI та SaaS.