Microsoft presentó su trabajo en un nuevo modelo de Inteligencia artificial (IA) que dota de expresividad a los avatares realistas mientras aparecen hablando en vídeos generator a partir de una imagen estática y un clip de voz.
VASA es la propuesta de Microsoft para generar rostros virtuales que hablan y gesticulan con gran expresividad y realismo en tiempo real, en las que el movimiento de los labios está «exquisitamente sincronizado con el audio».
Los rostros que simulan ser personas reales han sido generados por herramientas de IA StyleGAN2 y DALL·E-3, pero ninguna de ellas se corresponde a una identidad real, como matiza la compañía tecnológica.
Este realismo se refuerza con la sincronización y «el gran espectro de emociones y matices faciales» que combina con el movimiento natural de la cabeza, como explica en su blog oficial.
Diris Lima Sur lanza el primer informativo creado con inteligencia artificial en Perú
VASA requiere solo una imagen estática un fragmento de audio con voz para crear vídeos con un tamaño de 512 x 512 píxeles a 45 fotogramas por segundos en el modo ‘offline’, aunque ‘online’ soporta 40fps con una latencia de 170ms. La compañía lo ha evaluado con un ordenador de escritorio equipado con una GPU NVIDIA RTX 4090.
Microsoft aseguró que no planea lanzar la demo de esta herramienta dado los potenciales riesgos que tiene para su mal uso en la suplantación de personas reales.
Europa Press