Dubformer sichert 3,6 Millionen Dollar, um die AI-Dubbing-Technologie mit Emotion-Transfer-Technologie zu revolutionieren

Das AI-Dubbing-Startup Dubformer hat eine Seed-Finanzierungsrunde in Höhe von 3,6 Millionen Dollar gesichert, um die emotionale Tiefe in der Medienlokalisierung neu zu definieren. Die Investition, angeführt von Almaz Capital mit Beteiligung von s16vc und FinSight, sowie von Business-Angel-Investoren wie Arul Menezes, Gründer von Microsoft Translator, und Funa Maduka, ehemaliger Leiter von International Original Film bei Netflix , wird das Unternehmen bei seiner Mission unterstützen, gedubte Inhalte für das Publikum weltweit noch immersiver und ansprechender zu machen.

Die größte Herausforderung des AI-Dubbings lösen

Trotz erheblicher Fortschritte im Bereich des AI-Dubbings haben die meisten Lösungen immer noch Schwierigkeiten, authentische Emotionen in Voiceovers zu vermitteln. Forschungsergebnisse zeigen, dass das Publikum leicht zwischen menschlicher und künstlicher Intelligenz erzeugter Sprache unterscheiden kann, hauptsächlich aufgrund des Mangels an expressiver Tonlage bei der künstlichen Intelligenz. Diese Einschränkung verringert die Erfahrung des Zuschauers und beeinträchtigt die Bindung an lokalisierte Inhalte.

Mit einem Video-Lokalisierungsmarkt, der auf 7 Milliarden Dollar geschätzt wird und mit einem jährlichen Wachstum von 16 % wächst, suchen Medienunternehmen nach innovativen Lösungen, um die Qualität des Dubbings zu verbessern, ohne die hohen Kosten für traditionelle Synchronisation in Kauf nehmen zu müssen. Hier kommt Dubformer ins Spiel, ein Unternehmen, das diese Herausforderung direkt angeht.

Emotion-Transfer: Die nächste Evolution im AI-Dubbing

Im Gegensatz zu herkömmlichem AI-Dubbing, das Stimmen klont, hat Dubformer die Emotion-Transfer-Technologie entwickelt, die darauf abzielt, die emotionalen Nuancen der Sprache nachzubilden. Anstatt einfach Wörter zu übersetzen und zu synthetisieren, überträgt dieser bahnbrechende Ansatz die Intonation, den Rhythmus und die emotionale Tiefe von der ursprünglichen Leistung auf die gedubte Version.

„Bei Dubformer rekonstruieren wir nicht nur Stimmen – wir erfassen die Essenz der Leistung“, sagte Anton Dvorkovich, Gründer und CEO. „Mit Emotion-Transfer bewahren wir auch akustische Merkmale wie Echos und Reverberationen, um sicherzustellen, dass das Dubbing nahtlos in jede Szene integriert wird.“

Erkennung in der Branche

Die AI-Dubbing-Technologie von Dubformer hat bereits Anerkennung in der Branche erhalten. Beim WMT 2024, einem der renommiertesten Wettbewerbe im Bereich der maschinellen Übersetzung, belegte Dubformer den höchsten Rang in der Sprachübersetzung und war in mehreren Sprachen das beste Gesamtergebnis, wobei es große Spieler wie Google Translate, DeepL und ChatGPT übertraf.

Schnelles Wachstum und expandierende Kundenbasis

Gegründet im September 2023 von Anton Dvorkovich, einem Experten für maschinelle Übersetzung und ehemaligen Leiter von NLP & Speech bei Yandex, hat Dubformer ein explosives Wachstum erlebt. In den letzten sechs Monaten hat das Unternehmen ein beeindruckendes monatliches Wachstum von 50 % verzeichnet, was den zunehmenden Bedarf an AI-Dubbing-Lösungen widerspiegelt.

Derzeit bedient Dubformer über 200 Kunden in den USA und Europa, darunter große Namen wie Paramount, Little Dot Studios und Mainstream Media. Das Unternehmen hat auch Partnerschaften mit internationalen Firmen wie Voxx (Los Angeles), Presto (Tschechische Republik) und Gobavo (Türkei) geschlossen, um seine globale Präsenz auszubauen.

AI-Dubbing für jede Branche

Dubformer bietet Dubbing-Lösungen für verschiedene Branchen an, darunter Fernsehen, Animation und Filmproduktion. Die Technologie ist über eine offene Plattform und API zugänglich, was es Content-Erstellern, Lokalisierungsunternehmen und Sendern ermöglicht, AI-gesteuertes Dubbing in ihre Workflows zu integrieren.

• Für Content-Ersteller & kleine Unternehmen: Eine Selbstbedienungsplattform, die Inhalte in über 130 Sprachen übersetzt und einen einfachen dreistufigen Dubbing-Prozess bietet.
• Für Lokalisierungsunternehmen: Professionelle Tools, die hochwertiges Dubbing mit erweiterten Sprechfunktionen und Projektmanagement-Unterstützung bieten.
• Für Sender & Content-Vertreiber: Vollständiges AI-Dubbing mit menschlicher Qualitätskontrolle, um eine nahtlose Lokalisierung mit Studio-Qualität zu gewährleisten.

Die Zukunft des AI-Dubbings gestalten

Das Führungsteam von Dubformer besteht aus Experten im Bereich künstlicher Intelligenz, maschineller Übersetzung und Medien, die sich zum Ziel gesetzt haben, die Art und Weise, wie Inhalte lokalisiert werden, zu verändern. Mit der aktuellen Finanzierung wird das Unternehmen seine Betriebe skalieren und seine AI-Fähigkeiten weiter verbessern, um sicherzustellen, dass gedubte Medien emotional mit dem globalen Publikum in Resonanz treten.

„In einem sich schnell verändernden AI-Dubbing-Landschaft ist Dubformer entschlossen, die Branche voranzutreiben, indem es ihre größte Herausforderung – emotionale Authentizität – löst“, sagte Dvorkovich. „Indem wir AI-Dubbing natürlicher machen, ermöglichen wir es Medienunternehmen, ein breiteres Publikum zu erreichen, während sie die Lokalisierungskosten senken, ohne die Erfahrung des Zuschauers zu beeinträchtigen.“

Mit seiner bahnbrechenden Technologie und seinem ambitionierten Vision ist Dubformer auf dem Weg, die Zukunft der Medienlokalisierung zu gestalten.