El 6 de noviembre, Zuckerberg anunció en Threads que el asistente de IA personal Muse lanzó oficialmente conversaciones de voz en tiempo real y avatares virtuales. La función se ofrece primero a los usuarios de Estados Unidos, y cubre las apps móviles, la web y la aplicación para Mac. Al tocar el icono de teléfono en la esquina superior derecha de la aplicación, el usuario puede charlar con él como si marcara un teléfono e intercalar palabras para interrumpir en cualquier momento mientras habla. Esto significa que Muse ya no es solo texto en un cuadro de escritura, sino un interlocutor capaz de seguir la conversación y replicar.
Un solo conjunto de modelos controla a la vez la boca y la cara
Detrás están los dos modelos Muse Realtime Voice y Muse Realtime Avatar. El primero genera a la vez "qué decir" y "cómo decirlo"; el segundo, siguiendo el mismo flujo de datos, añade en tiempo real expresiones, movimientos labiales y gestos, para que la voz y la imagen no se desincronicen. El sistema puede emitir en streaming video vertical de 448×768 a 25 fotogramas por segundo, y desde que el usuario termina de hablar hasta recibir la primera respuesta de audio e imagen transcurren unos 870 milisegundos. En cuanto a la interacción, puede ser solo por voz, con el avatar junto al chat, o pasar a pantalla completa "cara a cara"; el personaje de dibujos animados por defecto, Jolly, puede cambiarse por personas o animales, y hay cientos de estilos de voz, desde "energía neoyorquina" hasta "acento pirata".
Apunta a los escenarios en los que "no puedes usar las manos"
Meta lo posiciona como un agente personal más natural: mientras caminas o tienes las manos ocupadas, dictas tareas con la voz y Muse sigue trabajando en segundo plano; también sirve para hacer lluvia de ideas, planear viajes o practicar entrevistas y discursos. La compañía incluso mostró una demostración en la que el avatar bailaba y luego se compartía con un toque en Instagram, Facebook y WhatsApp. Cuando la IA le crece una cara y una voz, el negocio del chat de compañía seguramente entrará en la batalla por la línea del "realismo humano".