Dubformer Raises $3.6M to Revolutionize AI Dubbing with Emotion Transfer Technology

AI-Dubbing-Startup Dubformer hat eine Seed-Finanzierungsrunde in Höhe von 3,6 Millionen Dollar gesichert, um die Art und Weise, wie emotionale Tiefe in der Medienlokalisierung erfasst wird, neu zu definieren. Die Investition, angeführt von Almaz Capital mit Beteiligung von s16vc und FinSight, sowie von Business-Angel-Investoren wie Arul Menezes, Gründer von Microsoft Translator, und Funa Maduka, ehemaliger Leiter von International Original Film bei Netflix, wird das Unternehmen bei seiner Mission unterstützen, gedubte Inhalte für das Publikum weltweit noch immersiver und ansprechender zu machen.

Lösung des größten Herausforderung von AI-Dubbing

Trotz erheblicher Fortschritte im Bereich AI-Dubbing kämpfen die meisten Lösungen immer noch darum, authentische Emotionen in Voiceovers zu vermitteln. Studien zeigen, dass das Publikum leicht zwischen menschlicher und künstlicher Intelligenz generierter Sprache unterscheiden kann, hauptsächlich aufgrund des Mangels an ausdrucksvollem Tonfall bei künstlicher Intelligenz. Diese Einschränkung verringert die Erfahrung des Zuschauers und beeinträchtigt die Bindung an lokalisierte Inhalte.

Mit der Video-Lokalisierungsbranche, die mit 7 Milliarden Dollar bewertet wird und mit einem jährlichen Wachstum von 16 % wächst, suchen Medienunternehmen nach innovativen Lösungen, um die Qualität des Dubbings zu verbessern, ohne die hohen Kosten für traditionelles Sprechen zu übernehmen. Hier kommt Dubformer ins Spiel, ein Unternehmen, das diese Herausforderung direkt angeht.

Emotion Transfer: Die nächste Evolution im AI-Dubbing

Im Gegensatz zu herkömmlichem AI-Dubbing, das Stimmen klonen, hat Dubformer Emotion Transfer entwickelt, eine Technologie, die darauf ausgelegt ist, die emotionalen Nuancen der Sprache zu replizieren. Anstatt einfach Wörter zu übersetzen und zu synthetisieren, überträgt dieser bahnbrechende Ansatz die Intonation, das Tempo und die emotionale Tiefe der ursprünglichen Leistung auf die gedubte Version.

„Bei Dubformer rekonstruieren wir nicht nur Stimmen – wir erfassen die Essenz der Leistung“, sagte Anton Dvorkovich, Gründer & CEO. „Mit Emotion Transfer bewahren wir auch akustische Merkmale wie Echo und Reverberation, um sicherzustellen, dass das Dubbing nahtlos in jede Szene integriert wird.“

Bewährte Branchen-Anerkennung

Dubformers AI-Dubbing-Technologie hat bereits Branchen-Anerkennung erhalten. Bei WMT 2024, einem der renommiertesten Wettbewerbe im Maschinellen Übersetzen, belegte Dubformer den höchsten Rang im Bereich Sprachübersetzung und war in mehreren Sprachen insgesamt führend, wobei es große Player wie Google Translate, DeepL und ChatGPT übertraf.

Schnelles Wachstum und erweiternde Kundenbasis

Gegründet im September 2023 von Anton Dvorkovich, einem Experten für maschinelles Übersetzen und ehemaligen Leiter von NLP & Speech bei Yandex, hat Dubformer ein explosives Wachstum erlebt. In den letzten sechs Monaten hat das Unternehmen ein beeindruckendes monatliches Wachstum von 50 % verzeichnet, was den zunehmenden Bedarf an AI-Dubbing-Lösungen widerspiegelt.

Derzeit bedient Dubformer über 200 Kunden in den USA und Europa, darunter große Namen wie Paramount, Little Dot Studios und Mainstream Media. Das Unternehmen hat auch Partnerschaften mit internationalen Firmen wie Voxx (Los Angeles), Presto (Tschechische Republik) und Gobavo (Türkei) geschlossen, um seine globale Reichweite zu erweitern.

AI-Dubbing für jede Branche

Dubformer bietet Dubbing-Lösungen für verschiedene Branchen an, darunter Fernsehen, Animation und Filmproduktion. Die Technologie ist über eine offene Plattform und API zugänglich, was es einfach für Content-Ersteller, Lokalisierungsunternehmen und Sender macht, AI-getriebenes Dubbing in ihre Workflows zu integrieren.

• Für Content-Ersteller & kleine Unternehmen: Eine Selbstbedienungsplattform, die Inhalte in 130+ Sprachen mit einem einfachen dreistufigen Dubbing-Prozess übersetzt.
• Für Lokalisierungsunternehmen: Professionelle Tools, die Sendekvalität-Dubbing mit erweiterten Sprechfunktionen und Projektmanagement-Unterstützung bieten.
• Für Sender & Content-Vertreiber: Vollständiges AI-Dubbing mit menschlicher Qualitätskontrolle, um eine nahtlose Lokalisierung mit Studio-Qualität zu gewährleisten.

Die Zukunft des AI-Dubbing formen

Dubformers Führungsteam besteht aus AI-, maschinellem Übersetzen- und Medienbranchen-Experten, die sich dazu verpflichten, die Art und Weise zu verändern, wie Inhalte lokalisiert werden. Mit ihrer neuesten Finanzierung wird das Unternehmen seine Betriebe skalieren und seine AI-Fähigkeiten weiter verbessern, um sicherzustellen, dass gedubte Medien emotional bei globalen Publika resonnieren.

„In einer sich schnell verändernden AI-Dubbing-Landschaft ist Dubformer bestrebt, die Branche voranzutreiben, indem sie ihre größte Herausforderung – emotionale Authentizität – löst“, sagte Dvorkovich. „Indem wir AI-Dubbing natürlich machen, ermöglichen wir es Medienunternehmen, ein breiteres Publikum zu erreichen, während sie Lokalisierungskosten senken, ohne die Erfahrung des Zuschauers zu beeinträchtigen.“

Mit seiner bahnbrechenden Technologie und seinem ambitionierten Vision ist Dubformer gut auf dem Weg, die Zukunft der Medienlokalisierung zu formen.