Adobe ha incorporado capacidades de IA en su software insignia de edición de fotos, lanzando una versión beta de Photoshop el martes que amplía enormemente lo que pueden hacer los artistas y editores de fotos. El movimiento promete desatar un nuevo torrente de creatividad al tiempo que nos da a todos una nueva razón para detenernos y preguntarnos si esa foto sexy, aterradora o inspiradora que estás viendo en línea es realmente real.
En mis pruebas, detalladas a continuación, encontré la herramienta impresionante pero imperfecta. Es importante agregarlo directamente a Photoshop, ya que permite a los creadores experimentar dentro de una herramienta de software que probablemente ya usen sin viajes a Midjourney, Stable Diffusion de Stability AI u otras herramientas de IA de terceros.
Con la llegada de la familia de tecnologías de IA generativa de Adobe Firefly en Photoshop, podrá permitir que la IA rellene una parte seleccionada de una imagen con lo que considere adecuado, por ejemplo, reemplazando las grietas de la carretera con pavimento liso. También puede marcar las imágenes que desee con un mensaje de texto, como agregar una doble línea amarilla a la carretera.
Firefly en Photoshop también puede expandir una imagen, agregando una nueva escena fuera del marco en función de lo que ya está en el marco o lo que sugiere con el texto. ¿Quieres más cielo y montañas en tu foto de paisaje? ¿Más multitud en un concierto de rock? Photoshop lo complacerá, sin las dificultades de hoy en día para encontrar y dividir el material de origen.
La característica, llamada empaque generativo y que emergerá de las pruebas beta en la segunda mitad de 2023, podría ser poderosa. En una demostración en vivo de Adobe, la herramienta a menudo pudo igualar los tonos de la imagen, combinarse sin problemas con las imágenes generadas por IA, inferir detalles geométricos de la perspectiva incluso en los reflejos y extrapolar la posición del sol a partir de las sombras y la neblina del cielo.
Tecnologías como estas surgieron durante el año pasado, ya que Stable Diffusion, Midjourney y Dall-E de OpenAI capturaron la imaginación de artistas y profesionales creativos. Ahora está integrado directamente en el software que probablemente ya estén usando, lo que simplifica lo que puede ser un proceso de edición engorroso.
“Realmente pone el poder y el control de la IA en manos del creador”, dijo Maria Yap, vicepresidenta de imágenes digitales de Adobe. “Realmente puedes divertirte un poco. Puedes explorar algunas ideas. Puedes pensar. Puedes crear sin tener que entrar demasiado rápido en las herramientas profundas del producto”.
Pero todavía no puedes vender nada. Con la tecnología Firefly, incluido lo que se produce mediante el relleno generativo en Photoshop, “no puede utilizar la salida para ningún propósito comercial”, afirman las reglas de IA experimental de Adobe.
Firefly AI en Photoshop es imperfecto, pero útil
En mis pruebas, encontré problemas repetidamente, muchos de los cuales probablemente se deban al rango limitado de imágenes de entrenamiento. Cuando traté de insertar un pez en una bicicleta en una foto, Firefly simplemente agregó la bicicleta. No pude hacer que Firefly agregara kraken de la Bahía de San Francisco. El buey almizclero parecía un híbrido panda-alce.
Los materiales menos extravagantes también presentan problemas. El guión suena como un escenario de sexo extraterrestre. Las sombras, la iluminación, la perspectiva y la geometría no siempre eran correctas.
La gente también es dura. Tras un examen más detenido, sus rostros estaban distorsionados de formas extrañas. Las personas añadidas a las tomas pueden colocarse demasiado alto en el encuadre o mezclarse de forma poco convincente.
Dicho esto, Firefly es excelente por lo que puede lograr, particularmente con tomas de paisajes. Puedo agregar montañas, océanos, cielo y colinas al paisaje. Un camión de reparto blanco en una escena nocturna era adecuadamente amarillento para que coincidiera con las luces de la calle de vapor de sodio en la escena. Si no le gustan los resultados del trío que ofrece Firefly, puede hacer clic en el botón “Crear” para obtener otro lote.
Dado el ritmo de desarrollo de la IA, espero que Firefly mejore en Photoshop.
Es difícil y costoso volver a entrenar modelos grandes de IA, lo que requiere un centro de datos lleno de hardware costoso para transferir datos, lo que a veces lleva semanas para los modelos más grandes. Pero Adobe planea realizar actualizaciones relativamente frecuentes para Firefly. “Esperar [about] Actualizaciones mensuales para mejoras generales Y volver a capacitarse probablemente cada pocos meses”, tuiteó Scott Belsky, director de productos de Adobe, el martes.
Automatización del procesamiento de imágenes
Durante años, “Photoshop” no solo se refería al software de Adobe. También se usa como verbo para referirse a la manipulación de fotografías, como adelgazar la cintura de las modelos u ocultar lanzamientos fallidos de misiles. Las herramientas de inteligencia artificial automatizan no solo la diversión y los vuelos de fantasía, sino también imágenes falsas, como una supuesta explosión en el Pentágono o una foto real disfrazada del Papa con una chaqueta acolchada, por mencionar dos ejemplos recientes.
Con la inteligencia artificial, espere que las técnicas de edición sean mucho más precisas que el humo adicional fácilmente reconocible como agregado digitalmente a las imágenes de un ataque israelí contra el Líbano en 2006.
Es un reflejo del arma de doble filo que es la inteligencia artificial generativa. No se puede negar que la tecnología es útil en muchas situaciones, pero también desdibuja la línea entre lo que es real y lo que es meramente plausible.
Por su parte, Adobe está tratando de minimizar los problemas. No permite indicaciones para crear imágenes de muchas figuras políticas y evita que tenga “problemas de seguridad” si intenta crear una imagen de humo negro frente a la Casa Blanca. Sus pautas de inteligencia artificial prohíben las imágenes que incluyen violencia, pornografía y “contenido engañoso, fraudulento o engañoso que puede provocar daños en el mundo real”, entre otras categorías. Inhabilitamos las cuentas que se involucran en comportamientos engañosos o maliciosos.
Firefly también está diseñado para eludir reclamos de diseño como el que provocó serias quejas de artistas descontentos al ver su género de arte reproducido en el centro de datos. Es compatible con la tecnología de credenciales de contenido de la iniciativa de autenticidad de contenido que se puede usar para etiquetar una imagen como generada por IA.
Hoy en día, las imágenes generativas de IA creadas con el sitio web de Adobe Firefly agregan credenciales de contenido de forma predeterminada junto con una marca de agua visible. Adobe dijo que cuando una función de Photoshop esté en versión beta y se envíe a finales de este año, las imágenes incluirán las credenciales de contenido automáticamente.
Las personas que intentan falsificar fotos pueden evitar esta tecnología. Pero a la larga, se convertirá en parte de cómo todos valoramos las imágenes, cree Adobe.
“Las credenciales de contenido brindan a las personas en las que quieren confiar una forma de confiar. Esta es una tecnología de código abierto que permite a todos adjuntar metadatos a sus imágenes para mostrar que crearon una imagen, cuándo y dónde se creó, y qué cambios se realizaron. en el camino”, dijo Adobe. “Una vez que se convierta en la norma que las noticias importantes vengan con credenciales de contenido, la gente sospechará cuando vea imágenes que no las tengan”.
Inteligencia artificial generadora de imágenes
La familia Adobe Firefly de herramientas generativas de inteligencia artificial comenzó con un sitio web que convierte un mensaje de texto como “silla moderna hecha con llantas viejas” en una imagen. Desde entonces, se han agregado dos opciones más, y los suscriptores de Creative Cloud también podrán probar una versión liviana de la interfaz de Photoshop en el sitio web de Firefly.
Cuando Dall-E de OpenAI llevó esta tecnología a cualquiera que se inscribiera en ella en 2022, ayudó a impulsar la IA generativa de una curiosidad tecnológica a la conciencia general. Ahora hay tanta ansiedad además de emoción que incluso los creadores de la inteligencia artificial se preocupan por lo que traerá la tecnología ahora y en un futuro lejano.
La IA generativa es una forma relativamente nueva de tecnología de IA. Los modelos de IA se pueden entrenar para reconocer patrones en cantidades masivas de datos (en este caso, imágenes etiquetadas de obras de arte de Adobe y otras fuentes con licencia) y luego crear nuevas imágenes basadas en los datos de origen.
La IA generativa saltó a la conciencia general de los modelos de lenguaje utilizados en herramientas como ChatGPT de OpenAI, Gmail, Google Docs y el motor de búsqueda Bing de Microsoft. Cuando se trata de la creación de imágenes, Adobe utiliza una tecnología de generación de imágenes de IA llamada Diffusion, que también está detrás de Dall-E, Stable Diffusion, Midjourney e Imagen de Google.
Adobe llama a Firefly for Photoshop una tecnología de “copiloto”, lo que la convierte en una ayuda creativa en lugar de un reemplazo para los humanos. Yap reconoce que algunos creadores se preocupan por ser reemplazados por IA. Adobe prefiere verlo como una tecnología que puede amplificar y acelerar el proceso creativo, extendiendo las herramientas creativas a una población más grande.
“Creo que el proceso de democratización por el que pasamos, W Tener más creatividad, es algo positivo para todos nosotros”, dijo Yap. Este es el futuro de Photoshop. “
Nota de los editores: CNET usa un motor de inteligencia artificial para crear algunas explicaciones sobre finanzas personales que nuestros editores editan y verifican. Para más ver Esta publicación.