融资

Dubformer 获得 360 万美元资金,利用情感转移技术革新 AI 配音

mm

AI 配音初创公司 Dubformer 已获得 360 万美元种子资金,重新定义媒体本地化中的情感深度。该投资由 Almaz Capital 领投,s16vc FinSight 参投,以及天使投资者包括 Arul Menezes ,Microsoft Translator 的创始人,以及 Funa Maduka ,Netflix 国际原创电影前负责人,将推动公司使配音内容更具沉浸感和吸引力,面向全球观众。

解决 AI 配音最大的挑战

尽管 AI 配音取得了显著进步,但大多数解决方案仍然难以在配音中传达真实的情感。 研究表明 ,观众可以轻松区分人类和 AI 生成的语音,主要是由于 AI 缺乏表达性语调。这一限制降低了观众的体验和对本地化内容的参与度。

随着 视频本地化行业 的价值达到 70 亿美元,增长率为 16% 的复合年增长率,媒体公司渴望创新解决方案来提高配音质量,而无需承担传统配音的高成本。 Dubformer 是一家直面这一挑战的公司。

情感转移:AI 配音的下一个演进

与传统的 AI 配音不同,Dubformer 开创了情感转移技术,旨在复制语音的情感细微差别。这种尖端方法不仅仅是翻译和合成文字,而是将原始演出的情感深度、语调和节奏转移到配音版本中。

“在 Dubformer,我们不仅仅是重现声音,我们还捕捉表演的本质,” Dubformer 的创始人兼 CEO Anton Dvorkovich 说。 “通过情感转移,我们还保留了声学特征,如回声和混响,确保配音无缝地融入任何场景。”

业界认可

Dubformer 的 AI 配音技术已经在业界获得了认可。在 WMT 2024 这一机器翻译竞赛中,Dubformer 在语音翻译中排名最高,并在多种语言中总体排名最高,超越了 Google Translate、DeepL 和 ChatGPT 等主要玩家。

快速增长和扩张的客户群体

成立于 2023 年 9 月 的 Dubformer,由机器翻译专家和前雅虎 NLP 与语音负责人 Anton Dvorkovich 创立,已经经历了爆炸性的增长。在过去的六个月里,公司保持了惊人的 50% 的月增长率,反映了对 AI 配音解决方案的日益增长的需求。

目前,Dubformer 为美国和欧洲的 200 多家客户提供服务,包括派拉蒙、Little Dot Studios 和 Mainstream Media 等大型公司。该公司还与国际公司如 Voxx(洛杉矶)、Presto(捷克共和国)和 Gobavo(土耳其)合作,以扩大其全球影响力。

适用于每个行业的 AI 配音

Dubformer 为电视、动画和电影制作等各个行业提供配音解决方案。其技术通过开放平台和 API 提供,使内容创作者、本地化公司和广播公司能够轻松将 AI 驱动的配音集成到其工作流程中。

  • 面向内容创作者和小型企业: 一个自助平台,可以将内容翻译成 130 多种语言,配备简单的三步配音流程。
  • 面向本地化公司: 提供专业工具的广播级配音,配备高级语音功能和项目管理支持。
  • 面向广播公司和内容分发商: 全面的 AI 配音,配备人工质量控制,确保本地化内容的无缝集成和工作室级精度。

塑造 AI 配音的未来

Dubformer 的领导团队由 AI、机器翻译和媒体行业专家组成,致力于改变内容本地化的方式。凭借最新的资金,公司将扩大其运营并进一步增强其 AI 能力,确保配音媒体能够在全球观众中产生情感共鸣。

“在快速发展的 AI 配音领域,Dubformer 致力于通过解决最大的挑战——情感真实性来推动行业发展,” Dvorkovich 说。 “通过使 AI 配音感觉更自然,我们使媒体公司能够接触更广泛的受众,同时降低本地化成本,而无需损害观众的体验。”

凭借其开创性的技术和雄心壮志的愿景,Dubformer 正在改变媒体本地化的未来。

安托万是一位具有远见的领导者和Unite.AI的联合创始人,他对塑造和推广人工智能和机器人技术的未来充满热情。作为一位连续创业者,他相信人工智能将对社会产生电力的影响一样的颠覆性影响,并经常被发现对颠覆性技术和通用人工智能的潜力大肆赞扬。

作为一位未来学家,他致力于探索这些创新将如何塑造我们的世界。另外,他还是Securities.io的创始人,这是一个专注于投资尖端技术的平台,这些技术正在重新定义未来并重塑整个行业。