Todo lo que aprendí fue probar la nueva herramienta de IA generativa de Photoshop


Adobe está incorporando capacidades generativas de IA en su software insignia de edición de imágenes con una nueva versión beta de Photoshop el martes. El movimiento promete desatar un nuevo torrente de creatividad al tiempo que nos da a todos una nueva razón para detenernos y preguntarnos si esa foto sexy, aterradora o inspiradora que estás viendo en línea es realmente real.

En mis pruebas, detalladas a continuación, encontré la herramienta impresionante pero imperfecta. Es importante agregarlo directamente a Photoshop, ya que permite a los creadores experimentar dentro de una herramienta de software que probablemente ya usen sin viajes a Midjourney, Stable Diffusion de Stability AI u otras herramientas de IA de terceros.

Con la llegada de la familia de tecnologías de IA generativa de Adobe Firefly en Photoshop, podrá permitir que la IA rellene una parte seleccionada de una imagen con lo que considere adecuado, por ejemplo, reemplazando las grietas de la carretera con pavimento liso. También puede marcar las imágenes que desee con un mensaje de texto, como agregar una doble línea amarilla a la carretera.

Firefly en Photoshop también puede expandir una imagen, agregando una nueva escena fuera del marco en función de lo que ya está en el marco o lo que sugiere con el texto. ¿Quieres más cielo y montañas en tu foto de paisaje? ¿Más multitud en un concierto de rock? Photoshop lo complacerá, sin las dificultades de hoy en día para encontrar y dividir el material de origen.

Firefly de Photoshop, que está programado para salir de la prueba beta en la segunda mitad de 2023, podría ser poderoso. En una demostración en vivo de Adobe, la herramienta a menudo pudo igualar los tonos de la imagen, combinarse sin problemas con las imágenes generadas por IA, inferir detalles geométricos de la perspectiva incluso en los reflejos y extrapolar la posición del sol a partir de las sombras y la neblina del cielo.

Tecnologías como estas surgieron durante el año pasado, ya que Stable Diffusion, Midjourney y Dall-E de OpenAI capturaron la imaginación de artistas y profesionales creativos. Ahora está integrado directamente en el software que probablemente ya estén usando, lo que simplifica lo que puede ser un proceso de edición engorroso.

“Realmente pone el poder y el control de la IA en manos del creador”, dijo Maria Yap, vicepresidenta de imágenes digitales de Adobe. “Realmente puedes divertirte un poco. Puedes explorar algunas ideas. Puedes pensar. Puedes crear sin tener que entrar demasiado rápido en las herramientas profundas del producto”.

Ahora es mejor que te prepares para ese futuro.

Firefly AI en Photoshop es imperfecto, pero útil

En mis pruebas, encontré problemas repetidamente, muchos de los cuales probablemente se deban al rango limitado de imágenes de entrenamiento. Cuando traté de insertar un pez en una bicicleta en una foto, Firefly simplemente agregó la bicicleta. No pude hacer que Firefly agregara kraken de la Bahía de San Francisco. El buey almizclero parecía un híbrido panda-alce.

Los materiales menos extravagantes también presentan problemas. El guión suena como un escenario de sexo extraterrestre. Las sombras, la iluminación, la perspectiva y la geometría no siempre eran correctas.

La gente también es dura. Tras un examen más detenido, sus rostros estaban distorsionados de formas extrañas. Las personas añadidas a las tomas pueden colocarse demasiado altas en el encuadre o mezclarse de manera poco convincente.

Dicho esto, Firefly es excelente por lo que puede lograr, particularmente con tomas de paisajes. Puedo agregar montañas, océanos, cielo y colinas al paisaje. Un camión de reparto blanco en una escena nocturna era adecuadamente amarillento para que coincidiera con las luces de la calle de vapor de sodio en la escena. Si no le gustan los resultados del trío que ofrece Firefly, puede hacer clic en el botón “Crear” para obtener otro lote.

Dado el ritmo de desarrollo de la IA, espero que Firefly mejore en Photoshop.

Es difícil y costoso volver a entrenar modelos grandes de IA, lo que requiere un centro de datos lleno de hardware costoso para transferir datos, lo que a veces lleva semanas para los modelos más grandes. Pero Adobe planea realizar actualizaciones relativamente frecuentes para Firefly. “Esperar [about] Actualizaciones mensuales para mejoras generales Y volver a capacitarse probablemente cada pocos meses”, tuiteó Scott Belsky, director de productos de Adobe, el martes.

Automatización del procesamiento de imágenes

Durante años, “Photoshop” no solo se refería al software de Adobe. También se usa como verbo para referirse a la manipulación de fotografías, como adelgazar la cintura de las modelos u ocultar lanzamientos fallidos de misiles. Las herramientas de inteligencia artificial automatizan no solo la diversión y los vuelos de fantasía, sino también imágenes falsas, como una supuesta explosión en el Pentágono o una foto real convincente del Papa con una chaqueta acolchada, para elegir dos ejemplos recientes.

Con la inteligencia artificial, espere que las técnicas de edición sean mucho más precisas que el humo adicional fácilmente reconocible como agregado digitalmente a las imágenes de un ataque israelí contra el Líbano en 2006.

Es un reflejo del arma de doble filo que es la inteligencia artificial generativa. No se puede negar que la tecnología es útil en muchas situaciones, pero también desdibuja la línea entre lo que es real y lo que es meramente plausible.

Por su parte, Adobe está tratando de minimizar los problemas. No permite indicaciones para crear imágenes de muchas figuras políticas y evita que tenga “problemas de seguridad” si intenta crear una imagen de humo negro frente a la Casa Blanca. Sus pautas de inteligencia artificial prohíben las imágenes que incluyen violencia, pornografía y “contenido engañoso, fraudulento o engañoso que puede provocar daños en el mundo real”, entre otras categorías. Inhabilitamos las cuentas que se involucran en comportamientos engañosos o maliciosos.

Firefly también está diseñado para eludir reclamos de diseño como el que provocó serias quejas de artistas descontentos al ver su género de arte reproducido en el centro de datos. Es compatible con la tecnología de credenciales de contenido de la iniciativa de autenticidad de contenido que se puede usar para etiquetar una imagen como generada por IA.

Inteligencia artificial generadora de imágenes

La familia Adobe Firefly de herramientas generativas de inteligencia artificial comenzó con un sitio web que convierte un mensaje de texto como “silla moderna hecha con llantas viejas” en una imagen. Desde entonces, se han agregado dos opciones más, y los suscriptores de Creative Cloud también podrán probar una versión liviana de la interfaz de Photoshop en el sitio web de Firefly.

Cuando Dall-E de OpenAI llevó esta tecnología a cualquiera que se inscribiera en ella en 2022, ayudó a impulsar la IA generativa de una curiosidad tecnológica a la conciencia general. Ahora hay tanta ansiedad además de emoción que incluso los creadores de la inteligencia artificial se preocupan por lo que traerá la tecnología ahora y en un futuro lejano.

La IA generativa es una forma relativamente nueva de tecnología de IA. Los modelos de IA se pueden entrenar para reconocer patrones en cantidades masivas de datos (en este caso, imágenes etiquetadas de obras de arte de Adobe y otras fuentes con licencia) y luego crear nuevas imágenes basadas en los datos de origen.

La IA generativa saltó a la conciencia general de los modelos de lenguaje utilizados en herramientas como ChatGPT de OpenAI, Gmail, Google Docs y el motor de búsqueda Bing de Microsoft. Cuando se trata de la creación de imágenes, Adobe utiliza una tecnología de generación de imágenes de IA llamada Diffusion que también está detrás de Dall-E, Stable Diffusion, Midjourney e Imagen de Google.

Adobe llama a Firefly for Photoshop una tecnología de “copiloto”, lo que la convierte en una ayuda creativa en lugar de un reemplazo para los humanos. Yap reconoce que algunos creadores se preocupan por ser reemplazados por IA. Adobe prefiere verlo como una tecnología que puede amplificar y acelerar el proceso creativo, extendiendo las herramientas creativas a una población más grande.

“Creo que la democratización por la que estamos pasando y tener más creatividad es algo positivo para todos nosotros”, dijo Yap. “Este es el futuro de Photoshop”.

Nota de los editores: CNET usa un motor de inteligencia artificial para crear algunas explicaciones sobre finanzas personales que nuestros editores editan y verifican. Para obtener más información, consulte esta publicación.