Uno de los anuncios más llamativos del Meta Connect 2024 tiene que ver con la inteligencia artificial. Mark Zuckerberg mostró los nuevos avances de Meta AI, principalmente un experimento que permitirá añadir doblaje al inglés o español en los Reels.

Durante la keynote de Meta Connect, Mark Zuckerberg anunció una función que añade doblaje al inglés a los Reels en español. Esta característica está potenciada por Meta AI y genera la voz en otro idioma basándose en la voz original del creador. Lo más interesante de esta tecnología, es que la IA también sincroniza los labios para que el video sea más realista.

En la demo se mostró una receta de Dana Buttigliero, más conocida como Sabores del Conurbano, quien prepara un postre con banana y dulce de leche. La versión con doblaje al inglés incluye sincronización de labios que calza perfecto con el audio, aunque la traducción de algunas palabras no es la mejor (dulce de leshi).

Tal vez la demostración más convincente fue con un video de Iván Acuña (artificialmente.ia). El evangelista de IA habla directamente a la cámara y se muestra por completo la sincronización de labios. Ambos videos muestran el potencial de crear videos en otro lenguaje de forma automática para llegar a una audiencia mayor.

Pese a que Mark Zuckerberg no ofreció detalles del doblaje automático usando IA, se sabe que esta tecnología estará disponible en Reels. Meta limitará el acceso a creadores de contenido de Estados Unidos y América Latina durante la primera fase, aunque prometió abrirla a más creadores y países en los próximos meses. Zuckerberg también confirmó que esta función se expandirá a otros idiomas más adelante.

Meta apuesta con todo por la IA

El doblaje al inglés y español en los Reels es solo uno de tantos experimentos de Meta con su inteligencia artificial. La compañía aprovechó su evento especial para mostrar los avances de Meta AI en todas sus aplicaciones. Entre las novedades se encuentra la posibilidad de usar nuestra voz para hablar con el asistente de WhatsApp, Messenger, Instagram y Facebook.

Meta ha incluido voces de famosos, como John Cena, Judi Dench, Kristen Bell o Awkwafina, para que hables directamente con ellos. La IA también añadió funciones para responder preguntas sobre tus fotos y editarlas. El modelo de lenguaje de Meta ya comprende imágenes y ofrece capacidades de edición avanzada, como remover el fondo y generar uno nuevo, añadir elementos y más.

Estas y otras características llegarán a todas las aplicaciones de Meta en las próximas semanas.

Fuente: Hipertextual