Esta IA revolucionará los efectos especiales en vídeos

Aquí hay una nueva Inteligencia Artificial que está dirigida a todos los cineastas aficionados. Gen-1 se especializa en generar videos que contienen efectos especiales. Convierta cualquier video muy mundano en una obra maestra con solo unas pocas palabras o una imagen de ejemplo.

Mientras continúa la guerra de los chatbots entre Microsoft y Google, otra empresa especializada en Inteligencia Artificial acaba de presentar una nueva herramienta que podría revolucionar la forma de producir videos. Llamado Gen-1, puede transformar completamente un video usando una imagen simple o unas pocas palabras.

Runway es conocida por su IA de difusión estable capaz de generar imágenes a partir de una oración, como Dall-E o Midjourney. Gen-1 funciona de manera muy similar a un filtro de Snapchat, pero de una manera mucho más avanzada. Es necesario partir de un video básico que se utilizará para proporcionar a la IA los elementos de la escena y los movimientos a reproducir. Luego dígale qué estilo usar, o proporcione una imagen de ejemplo, y la aplicará a todo el video.

Gen-1 genera videos a partir de otro que le sirve de referencia y una imagen o unas palabras escritas. © Pasarela

Efectos especiales al alcance de todos

El video de presentación es extremadamente impresionante. En un ejemplo, la IA crea un video animado a partir de un video muy básico tomado con un teléfono inteligente y las palabras " estilo de plastilina (animación con plastilina). La facilidad de uso significa que cualquiera puede crear contenido sin ningún conocimiento previo. Por ejemplo, todo lo que tiene que hacer es filmarse en su jardín, sin disfraz, luego proporcionar una foto de un astronauta para obtener una escena en la Luna.

AI también puede aislar un solo sujeto u objeto en un video para aplicarle ediciones. Los resultados aún son bastante imperfectos, pero las Inteligencias Artificiales están evolucionando cada vez más rápido. No sería sorprendente ver llegar una versión utilizable por Hollywood dentro de unos años.

Mientras tanto, Gen-1 podría revolucionar YouTube en su forma actual, facilitando la adición de efectos especiales, por ejemplo. Esta herramienta también podría ofrecer una mayor libertad a los "VTubers", youtubers que utilizan un avatar, que ya no estarán limitados a unas pocas poses predefinidas. Gen-1 está abierto al público, pero debe registrarse en la lista de espera.

Soundify agrega automáticamente efectos de sonido a los videos, tomados de un banco de sonido. © Pasarela

Otra IA en desarrollo para la pista de audio.

Eso no es todo, ya que Runway también está trabajando en una Inteligencia Artificial que complementaría a Gen-1. Soundify permite añadir efectos de sonido a cualquier vídeo de forma automática, como el sonido de una cámara, un avión, teclear en el teclado… Estos efectos de sonido no son generados por IA, sino tomados de un banco de sonido. Esto limita la potencia informática necesaria y, en particular, evita artefactos de audio.

La IA se encarga de identificar los elementos presentes en la imagen y luego insertar automáticamente los sonidos correspondientes en el video, lo que reduce significativamente el tiempo requerido para editar un video. Sin embargo, tendrás que esperar para probarlo, ya que Soundify aún no es de acceso público. Y si necesitas música de fondo para vídeos generados por Gen-1, todo lo que tienes que hacer es recurrir a MusicML, la IA de Google capaz de generar música...