Las películas y los programas de televisión modernos están llenos de espectaculares secuencias generadas por computadora calculadas mediante sistemas de representación que simulan el flujo de luz en una escena tridimensional y convierten la información en una imagen bidimensional. Pero computando los miles de rayos de luz por cuadro para lograr colores precisos, sombras, reflectividad y otras características basadas en la luz es una tarea costosa, laboriosa y costosa. Una alternativa es renderizar las imágenes usando solo unos pocos rayos de luz. Eso ahorra tiempo y trabajo peroda como resultado imprecisiones que aparecen como "ruido" objetable en la imagen final.
El estudiante de doctorado en ingeniería eléctrica e informática de la Universidad de Santa Bárbara, Steve Bako, y su asesor, Pradeep Sen, están avanzando en una solución. En los últimos años, los dos han trabajado con investigadores de Disney Research y Pixar Animation Studios paradesarrollar una nueva tecnología basada en la inteligencia artificial IA y el aprendizaje profundo para eliminar ese ruido y permitir una representación de calidad de producción a velocidades mucho más altas. Bako presentará los hallazgos en la conferencia SIGGRAPH, el principal lugar para la investigación técnica en gráficos por computadora, parase llevará a cabo del 31 de julio al 3 de agosto en Los Ángeles.
Bako pasó un año trabajando en Pixar. El equipo probó el software utilizando millones de ejemplos de la película "Finding Dory" para entrenar un modelo de aprendizaje profundo conocido como red neuronal convolucional. A través de este proceso, el sistema aprendió a transformarimágenes ruidosas en versiones sin ruido que se asemejan a las calculadas con significativamente más rayos de luz. Una vez capacitado, el sistema eliminó con éxito el ruido en las imágenes de prueba de películas completamente diferentes, como el último lanzamiento de Pixar, "Cars 3" y su próxima función ".Coco ", a pesar de que tenían estilos y paletas de colores completamente dispares.
"El ruido es un gran problema para la producción de producción", dijo Tony DeRose, jefe de investigación de Pixar. "Esta nueva tecnología nos permite eliminar automáticamente el ruido mientras conservamos los detalles en nuestras escenas".
El trabajo presenta un importante paso adelante con respecto a los métodos anteriores de eliminación de ruido, que a menudo dejaban artefactos o ruido residual que requerían que los artistas produjeran más rayos de luz o modificaran el filtro de eliminación de ruido para mejorar la calidad de un producto específicoimagen. Disney y Pixar planean incorporar la tecnología en sus líneas de producción para acelerar el proceso de creación de películas.
"Otros enfoques para eliminar el ruido de la imagen se han vuelto cada vez más complejos, con rendimientos decrecientes", dijo Markus Gross, vicepresidente de investigación de Disney Research. "Al aprovechar el aprendizaje profundo, este trabajo presenta un importante paso adelante para eliminar los artefactos indeseables de la animaciónPelícula s."
Para facilitar una mayor exploración de esta emocionante área, el equipo pondrá a disposición de la comunidad investigadora su código y los pesos entrenados del modelo de aprendizaje profundo.
Fuente de la historia :
Materiales proporcionado por Universidad de California - Santa Bárbara . Nota: El contenido puede ser editado por estilo y longitud.
Cite esta página :