AI 工具 101

抖音推出Boximator进行运动控制

mm
将 Unite.AI 添加到您在 Google 上的首选来源

您知道吗,抖音推出了一个新的运动控制功能,叫做Boximator?它是一个用于创建惊人视频的AI工具,具有平滑的运动控制。Boximator就像您的个人视频编辑器,可以提高您的视频动画质量。

如果您喜欢创建视频,Boximator将为您提供更多的控制权,具有先进的运动跟踪和手势识别功能。该工具简化了创建专业外观的视频的过程,具有先进的运动跟踪和手势识别功能。

使用Boximator,您可以创建具有吸引眼球的运动的专业外观的视频,即使您是视频编辑的新手。让我们讨论Boximator及其如何提升您的抖音体验。

什么是Boximator?

ByteDance,抖音的母公司,开发了Boximator。它使用了一种新的模型架构,称为PixelDance,它通过细粒度的运动控制来增强视频扩散模型。Boximator可以通过分析视频帧来识别视频中的对象。然后,它使用PixelDance模型为每个对象创建一个平滑的运动路径。这使您可以创建具有平滑的运动控制的视频,而无需手动调整每个帧。

图像来源

Boximator允许用户创建视频效果,如慢动作和超级延时。要使用Boximator,您只需将视频上传到抖音应用程序。然后,Boximator将自动分析您的视频并为视频中的每个对象创建一个平滑的运动路径。此外,您可以使用Boximator控制来调整运动路径并创建所需的效果。

Boximator的关键功能和功能

Boximator提供了各种视频创建功能。以下是其一些关键功能:

1. 直观的运动规格

Boximator提供了运动规格功能。用户可以通过在对象周围绘制框来轻松选择视频中的对象。用户无需编写复杂的指令,只需使用框和线来指示对象的运动路径。

2. 硬框和软框

Boximator使用两种类型的框来控制运动:硬框和软框。硬框定义了对象在不同视频时刻的确切位置和形状。相比之下,软框允许更灵活的运动。这些框帮助用户创建更自然和动态的动画。

3. 插件架构

Boximator还作为一个插件工作。它可以添加到现有的视频合成模型中,而无需更改其核心功能来训练一个专用的控制模块。这个专用模块然后帮助增强视频,而不会影响其原始质量。因此,用户可以更灵活地尝试新的功能。

4. 高级性能

Boximator可以帮助创建高质量的运动控制视频。该工具在Frechet视频距离(FVD)评分中超过了其他基线模型。这是因为Boximator使用了一个具有改进的边界框对齐度量的高级算法,可以准确预测视频中对象的运动。这样,用户可以创建清晰和吸引人的视频,具有专业的外观。

5. 自监督预训练

该工具采用了一种简单的自跟踪技术,简化了框-对象相关方法。这意味着它可以通过生成对象周围的框来学习识别和跟踪视频中的对象。另外,该模型被训练为在保留内部表示以继续运动控制的同时停止生成可见的框。因此,Boximator可以在无需手动训练每个视频的情况下学习创建平滑的运动控制。

Boximator的应用和影响

Boximator提供了一系列有趣的视频创作机会。它可以减少学习细粒度运动所需的计算资源。这样,创作者可以在没有强大的硬件的情况下创建高细节的动画。

Boximator为内容创作者提供了对象运动的准确和可靠的控制。该功能为动画图像增加了价值,使创建真实和吸引人的视频更加方便。

此外,Boximator擅长处理复杂场景。它可以处理多个复合元素,并允许内容创作者管理场景中的元素数量和它们之间的距离。该功能对于创建动画和动态视频效果至关重要。

图像来源

此外,该工具非常适合任何想要让视频看起来更专业的人。无论您是抖音明星、电影制片人还是喜欢与朋友分享有趣视频的人,Boximator都可以帮助您创建惊人的内容。

可用性和未来展望

Boximator的演示网站正在开发中。然而,一个早期体验渠道已经可用于测试和反馈。抖音旨在使该工具广泛可用,以增强所有用户的视频创作体验。

在未来,Boximator可以与包括抖音在内的各种平台集成。这种集成将使高级视频编辑功能面向更广泛的受众,我们可以期待看到惊人的动画和视频。

想要在AI创新中保持领先地位?请关注unite.ai以获取创意技术的最新进展。

Haziqa 是一名具有丰富经验的数据科学家,擅长为 AI 和 SaaS 公司撰写技术内容。