AI-tools 101

TikTok introduceert Boximator voor bewegingsbesturing

mm
Voeg Unite.AI toe aan je voorkeursbronnen op Google

Weet je dat TikTok een nieuwe functie voor bewegingsbesturing heeft geïntroduceerd genaamd Boximator? Het is een AI-hulpmiddel om geweldige video’s te maken met soepele bewegingsbesturing. Boximator werkt als je persoonlijke video-editor en kan je video-animaties verbeteren.

Als je van het maken van video’s houdt, geeft Boximator je meer controle over ze met geavanceerde bewegingsvolging en gebaarherkenning. Het hulpmiddel vereenvoudigt het proces van het maken van professioneel uitziende video’s met geavanceerde bewegingsvolging en gebaarherkenning.

Met Boximator kun je professioneel uitziende video’s maken met oogverblindende bewegingen, zelfs als je nieuw bent in video-editing. Laten we Boximator bespreken en hoe het je TikTok-ervaring kan verbeteren.

Wat is Boximator?

ByteDance, het moederbedrijf van TikTok, heeft Boximator ontwikkeld. Het gebruikt een nieuw type modelarchitectuur genaamd PixelDance dat video-diffusiemodellen verrijkt met fijne bewegingsbesturing. Boximator kan objecten in een video identificeren door de videoframes te analyseren. Vervolgens gebruikt het de PixelDance-modellen om een soepele bewegingspad te creëren voor elk object. Dit stelt je in staat om video’s te maken met soepele bewegingsbesturing zonder dat je elke frame handmatig hoeft aan te passen.

Afbeeldingsbron

Boximator laat gebruikers video-effecten maken zoals slow motion en hyper-lapse. Om Boximator te gebruiken, moet je je video alleen maar uploaden naar de TikTok-app. Boximator zal vervolgens automatisch je video analyseren en een soepele bewegingspad creëren voor elk object in de video. Bovendien kun je de Boximator-controles gebruiken om het bewegingspad aan te passen en het gewenste effect te creëren.

Sleutelfuncties en functionaliteit

Boximator biedt verschillende functies voor video-creatie. Hier zijn enkele van zijn belangrijkste functionaliteiten:

1. Intuïtieve bewegingsspecificatie

Boximator biedt bewegingsspecificatie-functies. Gebruikers kunnen eenvoudig objecten in een video selecteren door dozen om ze heen te tekenen. In plaats van complexe instructies te schrijven, kunnen gebruikers eenvoudig dozen en lijnen gebruiken om aan te geven waar ze een object willen hebben.

2. Harde dozen en zachte dozen

Boximator gebruikt twee soorten dozen om de beweging te helpen controleren: harde dozen en zachte dozen. Harde dozen definiëren de exacte posities en vormen van objecten op verschillende momenten in de video. In tegenstelling tot zachte dozen, die flexibele beweging toelaten. Deze dozen helpen gebruikers om meer natuurlijke en dynamische animaties te creëren.

3. Plug-in-architectuur

Boximator werkt ook als een plug-in. Het kan worden toegevoegd aan bestaande video-synthesemodellen zonder hun core-functies te veranderen om een speciale controle-module te trainen. Deze module helpt vervolgens om video’s te verbeteren zonder hun oorspronkelijke kwaliteit te beïnvloeden. Zo kunnen gebruikers meer flexibiliteit experimenteren met nieuwe functies.

4. Geavanceerde prestaties

Boximator kan helpen bij het maken van video’s met geavanceerde bewegingsbesturing. Het hulpmiddel heeft een hogere Frechet Video Distance (FVD)-score behaald dan andere baseline-modellen. Dit komt doordat Boximator een geavanceerd algoritme gebruikt met verbeterde bounding box-alignment metrics die de beweging van objecten in een video nauwkeurig voorspellen. Zo kunnen gebruikers duidelijke en boeiende video’s maken die er professioneel uitzien.

5. Zelf-supervised pre-training

Het hulpmiddel gebruikt een eenvoudige zelf-tracking-techniek die de box-object-correlaties-methode vereenvoudigt. Dit betekent dat het leert om objecten in video’s te identificeren en te volgen door dozen om ze heen te genereren. Bovendien is het model getraind om zichtbare dozen te stoppen met genereren terwijl het de interne representaties behoudt voor voortdurende bewegingsbesturing. Zo leert Boximator hoe het soepele bewegingsbesturing kan maken zonder handmatig getraind te hoeven worden op elke video.

Toepassingen en impact van Boximator

Boximator biedt een reeks interessante kansen voor video-creatie. Het kan de benodigde rekenbronnen voor het leren van fijne beweging verlagen. Zo kunnen creators zeer gedetailleerde animaties maken, zelfs zonder krachtige hardware.

Boximator biedt nauwkeurige en betrouwbare controle over objectbewegingen voor content-creators. Deze functie voegt waarde toe aan geanimeerde afbeeldingen en maakt het gemakkelijker om realistische en boeiende video’s te maken.

Bovendien is Boximator goed in het omgaan met complexe scenario’s. Het kan meerdere samengestelde elementen hanteren en content-creators toelaten om het aantal elementen en hun nabijheid binnen een scène te beheren. Deze functionaliteit is belangrijk voor het maken van animaties en dynamische video-effecten.

Afbeeldingsbron

Bovendien is dit hulpmiddel perfect voor iedereen die zijn video’s professioneler wil maken. Of je nu een TikTok-ster, filmmaker of iemand bent die gewoon leuk vindt om video’s met vrienden te delen, Boximator kan helpen om geweldige content te maken.

Beschikbaarheid en toekomstperspectieven

De Boximator-demo-website is in ontwikkeling. Echter, een vroeg ervaringskanaal is beschikbaar voor testen en feedback. TikTok streeft ernaar om dit hulpmiddel algemeen beschikbaar te maken om de video-creatie-ervaring voor alle gebruikers te verbeteren.

In de toekomst kan Boximator geïntegreerd worden met verschillende platforms, waaronder TikTok. Deze integratie zal geavanceerde video-editingfuncties beschikbaar maken voor een breder publiek, en we kunnen verwachten om geweldige animaties en video’s te zien.

Wil je op de hoogte blijven van de nieuwste ontwikkelingen in AI-innovatie? Houd unite.ai in de gaten voor de laatste ontwikkelingen in creatieve technologie.

Haziqa is een Data Scientist met uitgebreide ervaring in het schrijven van technische inhoud voor AI- en SaaS-bedrijven.