A Adobe incorporou habilidades generativas de IA em seu principal software de edição de imagens, lançando uma versão beta do Photoshop na terça-feira que expande drasticamente o que artistas e editores de fotos podem fazer. A mudança promete liberar uma nova torrente de criatividade, ao mesmo tempo em que nos dá um novo motivo para parar e nos perguntar se aquela foto sensacional, assustadora ou inspiradora que você vê na internet é realmente real.
Em meus testes, detalhados abaixo, achei a ferramenta impressionante, mas imperfeita. Adicioná-lo diretamente ao Photoshop é um grande negócio, permitindo que os criadores experimentem a ferramenta de software que provavelmente já estão usando sem excursões para meio da jornada, Estabilidade Difusão estável da IA ou outras ferramentas externas de IA generativa.
Com a família Firefly da Adobe de tecnologias generativas de IA chegando ao Photoshop, você poderá permitir que a IA preencha uma parte selecionada da imagem com o que achar mais adequado – por exemplo, substituindo as rachaduras da estrada por um pavimento liso. Você também pode especificar as imagens que deseja com um prompt de texto, como adicionar uma linha amarela dupla à estrada.
O Firefly no Photoshop também pode expandir uma imagem, adicionando um novo cenário além do quadro com base no que já está no quadro ou no que você sugere com o texto. Quer mais céu e montanhas em sua foto de paisagem? Uma multidão maior no show de rock? O Photoshop atenderá, sem as dificuldades atuais de encontrar material de origem e uni-lo.
O recurso, chamado de preenchimento generativo e programado para sair do teste beta no segundo semestre de 2023, pode ser poderoso. Na demonstração ao vivo da Adobe, a ferramenta costumava combinar os tons de uma foto, misturar imagens geradas por IA perfeitamente, inferir os detalhes geométricos da perspectiva mesmo em reflexos e extrapolar a posição do sol a partir das sombras e da neblina do céu.
Essas tecnologias têm surgido no último ano como Difusão estável, meio da jornada e o Dall-E da OpenAI capturou o imaginação de artistas e profissionais criativos. Agora ele está embutido diretamente no software que eles provavelmente já estão usando, simplificando o que pode ser um processo de edição complicado.
“Isso realmente coloca o poder e o controle da IA generativa nas mãos do criador”, disse Maria Yap, vice-presidente de imagens digitais da Adobe. “Você pode realmente se divertir. Você pode explorar algumas ideias. Você pode ter ideias. Você pode criar sem nunca necessariamente entrar nas ferramentas profundas do produto, muito rapidamente.”
Mas você não pode vender nada ainda. Com a tecnologia Firefly, incluindo o que é produzido pelo preenchimento generativo do Photoshop, “você não pode usar a saída para fins comerciais”, Regras beta de IA generativa da Adobe estado.
Conteúdo
Firefly AI do Photoshop imperfeita, mas útil
Em meus testes, frequentemente tive problemas, muitos deles provavelmente decorrentes do alcance limitado das imagens de treinamento. Quando tentei inserir um peixe em uma bicicleta em uma imagem, o Firefly apenas adicionou a bicicleta. Não consegui que Firefly adicionasse um kraken para emergir da Baía de São Francisco. Um boi-almiscarado parecia um híbrido panda-alce.
Material menos fantasioso também apresenta problemas. O texto parece o roteiro de uma raça alienígena. Sombras, iluminação, perspectiva e geometria nem sempre estavam corretas.
As pessoas também são difíceis. Olhando de perto, seus rostos estavam distorcidos de maneiras estranhas. Os seres humanos adicionados às tomadas podem ser posicionados muito alto no quadro ou misturados de forma pouco convincente.
Ainda assim, Firefly é notável pelo que pode realizar, principalmente com fotos de paisagens. Eu poderia adicionar montanhas, oceanos, céus e colinas às paisagens. Uma van de entrega branca em uma cena noturna era apropriadamente amarelada para combinar com as luzes de vapor de sódio da cena. Se você não gostar do trio de resultados que o Firefly apresenta, você pode clicar no botão “gerar” para obter outro lote.
Dado o ritmo dos desenvolvimentos da IA, espero que o Firefly no Photoshop melhore.
É difícil e caro treinar novamente grandes modelos de IA, exigindo um data center repleto de hardware caro para processar os dados, às vezes levando semanas para os modelos maiores. Mas a Adobe planeja atualizações relativamente frequentes para o Firefly. “Esperar [about] atualizações mensais para melhorias gerais e retreinamento a cada poucos meses com toda a probabilidade”, twittou o chefe de produto da Adobe, Scott Belsky, na terça-feira.
Automatizando a manipulação de imagem
Durante anos, “Photoshop” não se referia apenas ao software da Adobe. Também é usado como um verbo que significa manipulações de fotos como cinturas de supermodelos emagrecedoras ou esconder falhas de lançamento de mísseis. As ferramentas de IA automatizam não apenas a diversão e os voos de fantasia, mas também imagens falsas como uma suposta explosão no Pentágono ou uma foto convincentemente real do papa em uma jaqueta inchada para escolher dois exemplos recentes.
Com AI, espere técnicas de edição muito mais sutis do que a fumaça extra facilmente reconhecida como adicionado digitalmente às fotos de um ataque israelense no Líbano em 2006.
É um reflexo da faca de dois gumes que é a IA generativa. A tecnologia é inegavelmente útil em muitas situações, mas também confunde a linha entre o que é verdadeiro e o que é meramente plausível.
Por seu lado, a Adobe tenta reduzir os problemas. Ele não permite prompts para criar imagens de muitas figuras políticas e bloqueia você por “questões de segurança” se você tentar criar uma imagem de fumaça preta em frente à Casa Branca. E os seus Diretrizes de uso de IA proibir imagens envolvendo violência, pornografia e “conteúdo enganoso, fraudulento ou enganoso que possa levar a danos no mundo real”, entre outras categorias. “Desativamos contas que se envolvem em comportamentos enganosos ou prejudiciais.”
O Firefly também foi projetado para ignorar solicitações de estilo como as que provocaram sérias reclamações de artistas descontentes ao ver seu tipo de arte reproduzido por um data center. E suporta o Iniciativa de Autenticidade de Conteúdo tecnologia de credenciais de conteúdo que pode ser usada para rotular uma imagem como tendo sido gerada por IA.
Hoje, imagens de IA generativas feitas com Site Firefly da Adobe adicione credenciais de conteúdo por padrão junto com uma marca d’água visual. Quando o recurso do Photoshop estiver em teste beta e for lançado ainda este ano, as imagens incluirão credenciais de conteúdo automaticamente, disse a Adobe.
As pessoas que tentam falsificar imagens podem contornar essa tecnologia. Mas, a longo prazo, isso se tornará parte de como todos avaliamos as imagens, acredita a Adobe.
“As credenciais de conteúdo oferecem às pessoas que desejam ser confiáveis uma maneira de serem confiáveis. Esta é uma tecnologia de código aberto que permite que todos anexem metadados às suas imagens para mostrar que criaram uma imagem, quando e onde ela foi criada e quais alterações foram feito ao longo do caminho”, disse a Adobe. “Uma vez que se torna norma que notícias importantes vêm com credenciais de conteúdo, as pessoas ficarão céticas quando virem imagens que não o fazem”.
IA generativa para fotos
A família Firefly de ferramentas de IA generativas da Adobe começou com um site que transformava um prompt de texto como “cadeira moderna feita de pneus velhos” em uma imagem. Algumas outras opções foram adicionadas desde então, e os assinantes da Creative Cloud também poderão experimentar uma versão leve da interface do Photoshop no site Firefly.
Quando o Dall-E da OpenAI trouxe essa tecnologia para qualquer um que se inscreveu em 2022, ajudou a impulsionar a inteligência artificial generativa de uma curiosidade tecnológica para a consciência dominante. Agora há muita preocupação junto com a emoção, pois mesmo Os criadores de IA se preocupam com o que a tecnologia trará agora e em um futuro mais distante.
A IA generativa é uma forma relativamente nova de tecnologia de inteligência artificial. Os modelos de IA podem ser treinados para reconhecer padrões em grandes quantidades de dados – neste caso, imagens rotuladas do banco de arte da Adobe e outras fontes licenciadas – e, em seguida, criar novas imagens com base nesses dados de origem.
A IA generativa aumentou a conscientização com modelos de linguagem usados em ferramentas como o chatbot ChatGPT da OpenAI, o Gmail e o Google Docs do Google e o mecanismo de pesquisa Bing da Microsoft. Quando se trata de gerar imagens, a Adobe emprega um Técnica de geração de imagem AI chamada difusão que também está por trás de Dall-E, Stable Diffusion, Midjourney e Imagem do Google.
A Adobe chama o Firefly for Photoshop de tecnologia “co-piloto”, posicionando-o como uma ajuda criativa, não um substituto para humanos. Yap reconhece que alguns criadores estão nervosos com a possibilidade de serem substituídos pela IA. A Adobe prefere vê-la como uma tecnologia que pode ampliar e acelerar o processo criativo, espalhando ferramentas criativas para uma população mais ampla.
“Acho que a redemocratização que estamos passando, e ter mais criatividade é uma coisa positiva para todos nós”, disse Yap. “Este é o futuro do Photoshop.”