El gigante tecnológico, explica que la IA introduce “una arquitectura Espacio-Tiempo U-Net que genera la duración temporal completa del video de una sola vez, a través de un solo paso en el modelo”.

La nueva tecnología  puede aprender a generar directamente un video de baja resolución y velocidad de cuadros completa procesándolo en múltiples escalas espacio-temporales.

Te puede interesar: El Sevilla FC reclutará a jugadores con IA generativa de IBM ¿Cómo será el proceso?

“Demostramos resultados de generación de texto a video de última generación y demostramos que nuestro diseño facilita fácilmente una amplia gama de tareas de creación de contenido y aplicaciones de edición de video, incluida la conversión de imagen a video, pintura de video y generación estilizada”, explica Google. 

Algunas de sus características 

Generación de texto a video: Lumiere puede convertir una instrucción escrita en un video nuevo.

Conversión de imagen a video: Al convertir imágenes fijas en videos, Lumiere agrega movimiento y dinamismo fotos o dibujos.

Generación de video basada en estilo: Con la ayuda de una imagen de referencia, Lumiere puede generar videos en estilos específicos.

Te puede interesar: ¿IA acabará con nosotros? Estudio revela que es más barato contratar a un humano que a una IA

Edición de video basada en texto: Lumiere permite además la edición de video mediante indicaciones basadas en texto, facilitando la creación de videos de aspecto profesional.

Capacidades de inpainting de video: Lumiere puede cambiar la apariencia de objetos en un video, como alterar la ropa que llevan las personas que ha generado con una segunda instrucción.

Imagen: Captura de pantalla