Nvidia muestra una sofisticada técnica de reconstrucción de fotos basada en inteligencia artificial

Archivado
Investigadores de Nvidia han utilizado técnicas avanzadas de aprendizaje profundo para editar y reconstruir imágenes modificadas visualmente con un gran nivel de fidelidad con respecto al material original. Este método de restauración digital permite recuperar fotografías con "agujeros" o píxeles ausentes, pero también permite eliminar secciones de una imagen y rellenar dichos espacios de forma poco apreciable.

El documento en el que es descrita la tecnología señala que generalmente las técnicas anteriores se centraban en regiones rectangulares en posición central y requieren posprocesamiento para ocultar los defectos introducidos durante la recomposición de la imagen. El método desarrollado por Nvidia, sin embargo, funciona con "agujeros" de cualquier forma, tamaño y localización. Superficialmente puede recordar al método de Google Brain para reconstruir imágenes pixeladas, si bien los parecidos entre ambos son escasos.

La red neural desarrollada por los investigadores se ejecutó en múltiples unidades de supercomputación Tesla V100. Para su entrenamiento los investigadores generaron 55.116 máscaras con alteraciones aleatorias y 25.000 con fines de testeo. Estas últimas se dividieron en seis categorías distintas para ajustar la verosimilitud de las reconstrucciones.


Durante la fase de entrenamiento, señala Nvidia, el sistema introduce "agujeros" en imágenes completas para que la red neural pueda aprender a reconstruir los píxeles perdidos. La fase de testeo se ejecuta introduciendo otro tipo de "agujeros" que no estaban presentes anteriormente, permitiendo a los investigadores juzgar la precisión con la que las imágenes son restauradas.

Según señala Nvidia, este método de reconstrucción digital podría ser introducido en aplicaciones de retoque para ayudar a eliminar contenidos no deseados (por ejemplo: un photobomb) y sustituirlos con alternativas generadas mediante redes neurales, utilizando inteligencia artificial en lugar de horas de trabajo con el ratón o la tableta digitalizadora. Pero esta es solo una de sus posibilidades.

La demostración en vídeo muestra de forma bastante clara su funcionamiento, pero quienes estén interesados en saber más sobre la técnica pueden descargar desde aquí (PDF) un paper considerablemente más técnico.

Fuente: Nvidia
solo les falta tener cuidado con el modo recovery en placas tegra.
¿Esto servirá para las fotos porno con censura? Así se podrá quitar los cuadraditos que molestan o para restaurar fotos de internet con los ojos con franjas negras para que no se reconozcan sus caras.
Parece magia

Aruma escribió:¿Esto servirá para las fotos porno con censura? Así se podrá quitar los cuadraditos que molestan o para restaurar fotos de internet con los ojos con franjas negras para que no se reconozcan sus caras.


hombre, lo de los ojos en el vídeo cambia bastante la forma y color
A ver si chupa menos GPU/CPU que el deepfakes ese, que madre mia lo que tardaba !!!!
Parece el fotochop de muchachada nui las fotos de mujeres
Da un poco de grima.
photoshop al vuelo by Nvidia.
Que belleza de resultado con esto me ahorraría interminables jornadas de horas nalga retocando imágenes...
Lo importante, valdrá para quitar la censura del porno japonés?
La prueba de fuego será reconocer el captcha de los gatitos de rapidshare del 2010. Mientras tanto las IA estarán en pañales.
Financiado por Mariah Carey.xD
Aparecen las Casas Colgadas! Viva Cuenca!
Es el "Rellenar según contenido" de Photoshop llevado un paso más allá (en lo que respecta a las caras, en los paisajes es lo mismo).
Y yo desde el año 2007 utilizando Inpaint que hace lo mismo totalmente gratuito y acierta mejor. Claro que lo que hace es utilizar lo que hay por los alrededores, no puede reconstruir. De todas formas donde tenga yo Gimp que se aparten estos programas. Ahora solo queda que Nvidia anuncie nuevas gráficas solo para esto.

Oh, claro, digo.... Inpaint antes era gratuito, ahora es de pago.
Hala. A ponerselo mas facil a la manipulacion de la prensa.
Antes aun tenias que dedicar algo de tiempo y recursos para hacer estas cosas. Ahora cualquier idiota puede falsificar fotos.
Dentro de poco veremos insercion y ajuste automatizado de elementos.

Si, vale, podríamos decir que llegados a ese punto basta con decir "pues ya no me creo nada y listo"... vale, eso te libra de la informacion falsa, pero el problema es que nadie puede vivir totalmente sin informacion. Cuando la informacion falsa abunde tanto y sea tan facil de producir que toda la informacion quede manchada por la sospecha, tambien la informacion verdadera desaparece a efectos practicos.

Noticias, juicios, peritaje, relaciones personales... Nos estamos cargando los ultimos reductos de confianza que pudieran quedar en nuestras sociedades.
Aun vamos a tener que volver a formatos no-digitales para fiarnos de algo. El problema es que las nuevas generaciones no van a tener un punto de referencia con el que comparar la realidad subvertida en la que vivirán con algo... bueno, no TAN subvertido, como lo que existia hace un par de decadas, donde aun quedaba algun resto utilizable.

Si hoy en dia ya es muy dificil, y no siempre practico, saber que es real y que no, si siguen asi, con tanto desarrollo de IA y otras mierdas, llegará un punto en que será literalmente imposible saber NADA con una minima certeza porque todo podrá ser mentira y no tendrás manera de distinguirlo de la verdad.
Photoshop para boobs?, no sé si será el fin de los diseñadores gráficos.
Lo proximo seran lentillas con IA que hará que veamos a todos guapos, ahora las tías solo se fijaran en la cartera, no, espera....
Leugrim escribió:Photoshop para boobs?, no sé si será el fin de los diseñadores gráficos.


1. Si tú no sabes hacer algo y te muestran una forma simplificada de hacerlo, eso te convierte en bobo?

2. No tienes idea de lo que es un diseñador grafico, te piensas que hacen una carrera universitaria para restaurar fotos?

3. Espero seas menor de edad porque piensas como uno.
@PataponPSP Jaja, fue fallo de ortografía del móvil, quería decir noobs, no sabía que iba a herir los sentimientos de un diseñador gráfico, pero yo no aseguraba nada, lo ponía en duda, pero es uno de los trabajos que hacen si no me equivoco, si no sabes aceptar una opinión abandona los foros porque lo llevas claro.
Leugrim escribió:@PataponPSP Jaja, fue fallo de ortografía del móvil, quería decir noobs, no sabía que iba a herir los sentimientos de un diseñador gráfico, pero yo no aseguraba nada, lo ponía en duda, pero es uno de los trabajos que hacen si no me equivoco, si no sabes aceptar una opinión abandona los foros porque lo llevas claro.


1. No se si habrás herido los sentimientos de algún diseñador grafico, yo soy ingeniero.

2. Hay mucha diferencia entre una opinion y un insulto, si yo leo que te parecen bobos las personas que usan herramientas optimizadas es normal que piense que razonas como un niño o adolescente, porque un adulto maduro aplaudiría cualquier avance tecnológico que simplifique una tarea productiva. Ahora que ya corregiste y mencionas que quisiste decir noobs no pienso lo mimo de ti, pero aun así estoy en desacuerdo, porque esa herramienta es tanto para principiantes como para profesionales.
Lars_ur escribió:Lo proximo seran lentillas con IA que hará que veamos a todos guapos, ahora las tías solo se fijaran en la cartera, no, espera....


Bueno, con los filtros estos de "cara de bebé" en el tema de las fotos, ya hace tiempo que la gente se hace fotos donde salen sin imperfecciones y con ojos rollo manga. Es todo un tanto absurdo. No deja de ser una huída de la realidad, y no lleva a nada bueno. Reconstruir una foto inventándose el contenido, pues qué quieres que te diga, puede ser útil en algunos casos pero bastante absurdo e innecesario en la mayoría. Como siempre, lo importante es el uso que se le dé.
Luego lo que me hará gracia de esto es el tema de la propiedad intelectual y la supuesta originalidad (que no es tal) de las creaciones. Esto es como los que se quejan de las descargas usando el autotune.

Salu2
22 respuestas
Archivado
Volver a Tecnología