Google lanza Lumiere, la IA que genera vídeos a partir de textos

Google lanza Lumiere, su IA para generar video a partir de texto y sus resultados son impresionantes.

Publicado el 24 de enero de 2024, Google habla sobre el lanzamiento de Lumiere, una nueva Inteligencia Artificial (IA) desarrollada por Google. Esta IA es capaz de convertir texto e imágenes en vídeo, una innovación que se considera sorprendente y que parece provenir del futuro debido a los impresionantes resultados que ha logrado.

La tecnología de generación de vídeo de Lumiere busca ser una alternativa a los modelos de código abierto que ya están creando vídeos. Google ha presentado Lumiere en su propia página de Github, con varios ejemplos funcionales. El modelo utiliza tecnologías text-to-video y image-to-video para traer imágenes realistas a la vida. Lo que distingue a Lumiere es su capacidad para generar vídeos completos de una sola vez, permitiendo un movimiento más realista en comparación con los generadores de vídeo actuales que unen fotogramas separados y les añaden superresolución.

Entre las funciones destacadas de Lumiere se encuentran:

  1. Generación estilizada: con una imagen de referencia realista, se pueden crear logos animados o imágenes más caricaturescas.
    Estilización de vídeo: posibilidad de cambiar el estilo de objetos o personas en un vídeo existente.
  2. Animación de imágenes ya existentes: por ejemplo, animar una fotografía de una mariposa sobre una planta o del fuego de una hoguera.
  3. Imaginar vídeos reales: completar vídeos inacabados o con zonas cortadas con gran exactitud.
  4. Modificación en tiempo real: cambiar aspectos de un vídeo, como el atuendo de una persona, a través de descripciones a la IA.

Este desarrollo abre un sinfín de posibilidades para mejorar la edición de vídeo y fomentar la creatividad. Por el momento, Lumiere no está accesible al público, pero Google ha publicado un extenso documento mostrando sus avances. La presentación de Lumiere es considerada un paso ambicioso en el campo de la IA aplicada a la generación de vídeo.