Google ha introducido un nuevo modelo de video con IA llamado Lumiere , que puede crear movimientos realistas y diversos en videos. Lumiere es un modelo de texto a video e imagen a video, lo que significa que puedes ingresar texto o una imagen, y las redes neuronales de IA lo convertirán en un video. A diferencia de las funciones simples de conversión de texto a video, Lumiere permite a los usuarios animar imágenes existentes, crear videos con el estilo de las imágenes de entrada y generar animaciones específicas dentro de una imagen. La innovación de Lumiere radica en su modelo de difusión espacio-temporal, que genera la duración temporal completa de un vídeo a la vez, asegurando una coherencia temporal global en diferentes fotogramas. El artículo de investigación muestra las capacidades de Lumiere a través de varios ejemplos, demostrando una consistencia y precisión prometedoras al representar diversas escenas y animaciones impresionantes en transformaciones de imagen a video.
La importancia de Lumiere radica en su potencial para permitir a los usuarios crear fácilmente películas de alta calidad. La comunidad de IA ha estado explorando cómo dichos modelos pueden generar imágenes y videos, y Lumiere representa un salto significativo en la síntesis de video impulsada por IA. Sin embargo, el documento reconoce el riesgo de uso indebido para crear contenido falso o dañino y enfatiza la importancia de desarrollar herramientas para detectar sesgos y usos maliciosos.
Si bien Lumiere no está actualmente disponible para uso público, los expertos creen que podría mejorar las capacidades multimodales de Google Bard en el futuro, aunque no hay confirmación oficial de su integración. Fuente: Google Tags: Tecnología, IA , Google, Google Lumiere
