Esta IA crea videos por los que puedes caminar

Investigadores de la Universidad Carnegie Mellon han presentado en un estudio un sistema capaz de combinar varios videos grabados en teléfonos inteligentes para recrear una impresionante visualización 4D, que permite varias operaciones asombrosas. En varios videos de demostración, podemos ver notablemente al equipo eliminar caracteres en primer plano. Según el equipo, incluso sería posible realizar una transferencia filmando a un individuo en un entorno y luego transponiéndolo a un segundo paisaje. Pero lo más impresionante es que esta tecnología permite ver la escena desdevarios ángulos, que no tienen nada que ver con la posición original de la cámara - y el todo sin pantalla verde !

Para probar la viabilidad de su técnica, los investigadores utilizaron alrededor de quince teléfonos diferentes (en este caso, iPhones) para capturar clips de varias y variadas escenas. Una forma de demostrar que "cualquiera puede usar este sistema". Es cierto que todavía hay artefactos, especialmente cuando la cámara virtual gira de manera muy marcada. Pero en general, debemos admitir que el resultado es simplemente impresionante, incluso en casos tradicionalmente muy difíciles como los movimientos de un vestido de tela.

¿El futuro de la realidad aumentada y la postproducción?

Ciertamente, tecnologías de este tipo ya existen y lo han sido durante mucho tiempo. Los ejemplos son numerosos: se puede, por ejemplo, citar Matrix, publicado en 1999, que incluye un ejemplo que quedó en los anales. En esta escena, Keanu Reeves fue filmado por numerosas cámaras sincronizadas en un plató totalmente verde, antes de arreglar todo en postproducción con mucha perseverancia y sobre todo un render granja extremadamente poderoso.

Y desde entonces, se han desarrollado técnicas mucho más sofisticadas para perfeccionar este efecto visual y hacerlo cada vez más convincente. La Universidad Carnegie Mellon también es particularmente productiva en esta área, ya que a ella también le debemos el CMU Panoptic Studio, un estudio esférico encerrado en tecnología de punta, que incluye más de 500 cámaras, y destinado a estudiar los movimientos. Pero lo que hace que su nueva contribución sea tan impresionante es que no requiere ni la infraestructura ni la potencia informática de las anteriores: todo se puede hacer en tiempo real a partir de imágenes filmadas a mano. Por tanto, no es necesario un conjunto de cámaras calibradas con micrómetros y sincronizadas a la perfección.

Para lograr esta hazaña, los investigadores utilizaron una red neuronal convolucional. (CNN, por Red neuronal convolucional). Este tipo de algoritmo aprendizaje profundo es particularmente popular entre los científicos que trabajan en inteligencia artificial aplicada a datos visuales, como imágenes; Bansal y sus colegas también descubrieron que podía recomponer fácilmente diferentes clips en una escena 4D. Como una escena 3d, pero con una dimensión añadida ligada al movimiento de la cámara. A día de hoy, uno puede imaginar fácilmente las aplicaciones potenciales de tal técnica, incluso si eso significa usarlas con equipos profesionales a gran escala. Pero el interés real ciertamente se sentirá después de algunos trabajos de investigación adicionales: una vez que madure, esta tecnología podría multiplicar las posibilidades para un programador de AR o un director con un presupuesto ajustado. O, ay, haz que los videos falsificados sean un poco más realistas ...

Apple iPhone 11 (128 GB) -...

• Contenido del paquete: iPhone, EarPods con conector Lightning, cable Lightning a USB, ...
• Pantalla LCD Liquid Retina HD de 6.1 pulgadas
• Resistente al polvo y al agua (hasta 2 metros por un máximo de 30 minutos, ...
• Cámara dual con ultra gran angular y gran angular de 12 MP; Modo noche, modo retrato ...