ElevenLabs i Meta, czyli polsko-amerykański akcent w dubbingu AI

Dodane:

MamStartup logo Mam Startup

ElevenLabs i Meta, czyli polsko-amerykański akcent w dubbingu AI

Udostępnij:

ElevenLabs rozpoczyna strategiczną współpracę z Meta Platforms, właścicielem Facebooka, Instagrama i ekosystemu wirtualnej rzeczywistości Horizon. Porozumienie ma na celu masowe wdrożenie technologii AI do dubbingu i generowania dźwięku w największych globalnych platformach.

Koniec językowych barier na Instagramie?

Podstawowym celem współpracy jest wdrożenie narzędzi ElevenLabs na platformach Meta, co ma ułatwić twórcom dotarcie do międzynarodowej publiczności i zwiększyć immersyjność doświadczeń w metawersum. Być może najciekawszym efektem tej kooperacji będzie dla miliardów użytkowników wdrożenie automatycznego dubbingu w językach lokalnych dla materiałów wideo, przede wszystkim na platformie Instagram Reels. Narzędzia ElevenLabs pozwolą na zachowanie głosu i stylu, co ma wyeliminować „robotyczne” brzmienie, w zamian czyniąc dubbing autentycznym i angażującym. W rezultacie, integracja ma stanowić wsparcie dla twórców, którzy będą mogli docierać do widzów na całym świecie bez konieczności ponoszenia wysokich kosztów tradycyjnego dubbingu czy nagrywania ścieżek audio od nowa. Meta wcześniej informowała, że dla twórców z Facebooka z minimum 1000 obserwujących i wszystkich publicznych kont na Instagramie, dubbing z użyciem AI będzie darmowy.

Co (będzie) słychać w Horizon Worlds?

W ekosystemie wirtualnej i mieszanej rzeczywistości Meta — Horizon Worlds — technologia ElevenLabs ma znaleźć zastosowanie w generowaniu:

  • głosów postaci, co umożliwi twórcom szybkie generowanie realistycznych i unikalnych głosów dla postaci w wirtualnych światach;
  • muzyki i efektów dźwiękowych: ElevenLabs rozwija również funkcjonalności takie jak Text to SFX, które pozwalają na generowanie dźwięków i efektów na podstawie tekstu, co może znacząco obniżyć koszty produkcji audio dla twórców gier i wirtualnych przestrzeni.

Wiceprezes PFR Mariusz Jaszczyk, komentując niedawną współpracę ElevenLabs z polską prezydencją w Radzie UE, podkreślał, że polska prezydencja „nie tylko mówi o innowacji, ale także pokazuje jak te nowoczesne technologie mogą przyczynić się do wsparcia komunikacji”. Współpraca z Meta przenosi tę wizję na globalną skalę konsumencką.

Obecnie brakuje jasnych ram czasowych co do pełnego wdrożenia dubbingu w Instagram Reels, a także konkretnych szczegółów na temat ewentualnej wyłączności ElevenLabs jako dostawcy audio AI dla Meta.