Nvidia es una empresa conocida por sus tarjetas gráficas, pero la compañía también fabrica algunas herramientas de software interesantes. Un ejemplo de esto es la función de eliminación de ruido conocida como RTX voice, que se actualizó para funcionar con todas las tarjetas GeForce a principios de este año , y hace un excelente trabajo limpiando el ruido de fondo.
Ahora Nvidia ha estado mostrando una nueva herramienta, que por ahora esta en beta, llamada Audio2Face que tiene la capacidad de trabajar con archivos de audio y aplicarlos a la animación en un rostro coincidiendo de manera sorprendente.
Lo hace automáticamente, funciona bien con la mayoría de los idiomas y se puede ajustar con los controles deslizantes para obtener más detalles.
Para hacer esto, Nvidia ha implementado una red neuronal que hace coincidir las animaciones faciales con el audio en tiempo real. Cuando iniciamos el programa por primera vez, puede que tome un momento sincronizar el motor Tensor RT que optimizara la red neuronal para nuestro hardware.
Como beneficio adicional, Nvidia on Demand es el sitio web de tutoriales de la compañía en donde tenemos montones de videos de Omniverse y Audio2Face. El primer video de Audio2Face data de marzo de 2020, pero los tutoriales más recientes incluso detallan cómo exportar el proceso a otras herramientas como Unreal Engine 4.