Expertos de Google Research y dell 'Universidad Hebrea de Jerusalén Ellos Desarrollaron Dreamix, un software que puede usar cualquier material para crear videos que coincidan con instrucciones de texto. Otro paso adelante de la inteligencia artificial generativa en la protección de todas las formas de expresión (tras testi, imágenes e audio). Lo especial de Dreamix es que no se limita a instrucciones de texto, sino que también acepta fotos o videos de referencia para una mejor adaptabilidad a las ideas de los usuarios.
Tres modos de funcionamiento a partir de instrucciones de texto, imágenes, clips
Comenzando con imágenes, clips o instrucciones de texto, Dreamix ofrece tres características principales: edición de video, generación de vídeo a partir de imágenes y generacion basado en el tema.
Con el "edición de video, Dreamix puede reproducir fácilmente videos de entrada y reemplazar elementos con sus objetos favoritos. Por ejemplo, puede cargar un clip de una persona cortando una fruta y pedirle a la IA que reemplace la fruta con un trozo de pastel. Puede proporcionar algunas imágenes de un campo de maíz y crear un paisaje más dramático. Como siempre, primero les mostraré los clips de los dos ejemplos.
Dreamix es capaz de producir videos comenzando con imágenes (y/o instrucciones de texto). En este ejemplo, la IA transformó una imagen estática en una obra dinámica insertando un tiburón nadando y haciendo que la tortuga se moviera. La posición y el fondo se han mantenido fieles a la imagen original, mientras que se ha cambiado la dirección de la tortuga.
La última de las tres funciones permite a Dreamix crear videos animados a partir de una pequeña colección de imágenes que muestran el mismo tema. Por ejemplo, si le das a esta IA algunas imágenes de un bombero de juguete, extrae las características visuales del sujeto y las anima para que el sujeto pueda realizar acciones definidas en instrucciones de texto.
En fin
Esta tecnología podría cambiar las reglas del juego para los creativos que no solo se basan en el lenguaje verbal, sino que también se inspiran en el arte visual. Por el momento, los resultados aún parecen muy inciertos, pero aún demuestran la capacidad de la IA para comprender las instrucciones de texto y el contexto de las imágenes de entrada.
Dreamix será de gran ayuda para agilizar la creación de storyboards o generar ilustraciones de referencia. No es de acceso público en este momento (y nos preguntamos si Google lo convertirá en uno de los "portadores estándar" para responder a ChatGPT), sin embargo, no pasará mucho tiempo antes de que veamos esta u otras herramientas similares desarrolladas por diferentes empresas.
La inteligencia artificial generativa también está destinada a opinar en la televisión y el cine. ¿Quieres más ejemplos? Aquí está toda la presentación.
