Adobe está cargando su programa de edición fotográfica más popular, Photoshop, de inteligencia artificial. Prepara una función para reemplazar el cielo, permite seleccionar sujetos de una foto automáticamente, aplica filtros de forma inteligente y ahora la compañía asegura que su software es capaz de multiplicar por cuatro la resolución de las fotos sin perder calidad.
Adobe ha bautizado esta nueva función como "Super Resolución". Ya está operativa en Camera Raw 13.2 y próximamente llegará a Lightroom y Lightroom Classic. Super Resolución se vale de un modelo de machine learning entrenado con "millones de fotos" que, según Adobe, "puede ampliar fotos de manera inteligente mientras mantiene los bordes limpios y preserva los detalles importantes".
¿Por qué más megapíxeles?
Muestras del dataset usado para entrenar al modelo de machine learning.
En pocas palabras, Super Resolución es una función capaz de convertir una foto de diez megapíxeles en una foto de 40 megapíxeles. Para ello, Adobe entrenó un modelo de machine learning con millones y millones de pares de trozos de imágenes de alta y baja resolución, de forma que el modelo fuera capaz de aprender a aumentar el tamaño de las imágenes de baja resolución.
Es, básicamente, una red neuronal convolucional profunda: para determinar cómo muestrear un píxel determinado, el sistema analiza los píxeles de alrededor para obtener contexto. Los primeros resultados no suelen ser buenos, pero conforme más se alimenta el modelo y más pares de imágenes tiene, más preciso se hace y más capaz es de redimensionar la foto sin perder calidad. En la imagen inferior podemos ver cómo funciona el modelo cuando está completamente entrenado.
De arriba a la izquierda a abajo a la derecha, progreso del entrenamiento del modelo.
¿Y por qué querríamos más megapíxeles? Después de todo, no es raro que los móviles de hoy en día tengan hasta 108 megapíxeles y que las cámaras DSLR tengan 24 o más megapíxeles. Quizá no siempre sea necesario, pero puede haber ocasiones en las que sí. Algunos ejemplos podrían ser fotos antiguas, tomadas en menor resolución, que ahora podremos ampliar; o sujetos fotografiados desde lejos, que al ampliar la foto pierden nitidez.
El resultado, al menos por lo mostrado por Adobe, parece ser realmente bueno. El usuario solamente tiene que pulsar el comando en cuestión y el ordenador devolverá un archivo DNG nuevo con la foto mejorada.
Cualquier edición que se haga al DNG original se transferirá al DNG modificado. Por ahora la funció está limitada a fotos de 65.000 píxeles de largo y 500 megapíxeles. Funciona con archivos RAW, pero también con JPEG, PNG y TIFF. Como decíamos, está disponible ya en Camera Raw 13.2 y próximamente llegará a Lightroom y Lightroom Classic.
Más información | Adobe
Ver 23 comentarios
23 comentarios
and3r
Pues sí que han tardado en añadirlo a Photoshop. Esto lo tenían ya en la primera temporada de csi
JuanAnt
Como han dicho algunos, el Topaz funciona bien (aunque no como muestran en su web) y la versión para video también.
Usuario desactivado
nada del otro mundo. lo extraño es que no incorporaran desde antes algun modelo de red neuronal para superresolucion en una imagen, que hay varios disponibles bastante buenos hace años.
yo empleo varios en cosas de trabajo e investigacion (y son open source!!), ademas de hacerme el mio propio. asi que teniendo esos opensource (preentrenado o tomar uno y hacer su propio entrenamiento, quizas esto ultimo fue lo que hicieron), no se por que no habian usado alguno. a menos que solo siga el "not invented here"
como aplicacion comercial he venido usando el Topaz Gigapixel. lo tengo instalado en version 5.4.2 (tuve que bajar de la 5.5.4 que me daba problemas)
quizas Adobe hizo contrato con Topaz e incluyeron su tecnologia. tengo que ver de cerca y mirar los archivos, pues en interfaz, la simplificaron a solo usar 1 checkbox.
una cosa que espero es que lo hayan hecho para ser bien acelerado, ya sea en GPU, en unidades dedicada en el cpu, o en el cpu con las intrucciones mas amplias y rapidas para ello.
esto es similar al como "hicieron" filtro Shake Reduction, que no es mas que resultado de unos investigadores de una universidad, a la que compraron alguna licencia o algo asi. cosa interesante, tengo hehco hace años un filtro para hacer lo mimso, solo que no tengo el paso de estimacion del desenfoque, lo hago estimado a mano. pero el resultado me puede quedar mejor que el de photoshop. si uso el filtro de photoshop para la estimacion y esta sla emplo en mi filtro, me queda mejor aun!!! realmente debo retomarlo a ver si logro hacer la estimacion ciegas del desenfoque
chandlerbing
Deberian hablar con Nvidia para habilitar el uso de los tensor cores de las nuevas GPU's y usar DLSS para imágenes estáticas.
ismaeloeloelo
Yo usé hace mil años un plugging de GIMP que hacía eso mismo y lo hacía muy muy bien. Mucho mejor que Photoshop. No me acuerdo del nombre... Creo que era algo así como resize
Gustavo Woltmann
Pues nada mal, esta evolucionando muy rápido este sector.
Usuario desactivado
Pixelmator Pro también tiene algo así desde hace mucho. Se llama ML Enhance y no sirve necesariamente para multiplicar la resolución por 4. Se puede multiplicar por más, aunque por supuesto no hace milagros si nos pasamos ampliando.