Analyse | Tout le monde peut utiliser Photoshop maintenant, grâce au dernier bond en avant de l’IA

L’IA fait entrer Photoshopping dans une nouvelle ère, où vous pouvez modifier une image de manière sophistiquée et parfois effrayante sans maîtriser un logiciel complexe. C’est loin d’être parfait : vous pouvez supprimer un ex d’une photo en seulement deux clics, bien que l’IA aléatoire puisse remplacer cette personne par une autre dont le visage semble fondre.

Mais ce saut d’IA signifie que n’importe qui peut maintenant réaliser au moins un travail Photoshop loufoque. Le même outil d’IA peut à la fois transformer des images en amusement joyeux et être utilisé pour manipuler ou même exploiter. Et cela ajoute une nouvelle urgence à une question soulevée pour la première fois par Photoshop il y a plus de 30 ans : combien de temps encore pourrons-nous faire confiance à ce que nous voyons ?

Pour avoir un aperçu de ce qui arrive sur vos photos, à la fois celles que vous voyez et celles que vous prenez, nous avons testé une version bêta de Photoshop avec sa nouvelle fonction AI appelée remplissage génératif. C’est une réponse du fabricant de Photoshops Adobe à une multitude de nouveaux outils de création d’images IA qui menacent de le rendre redondant, notamment DALL-E 2, Midjourney et Stable Diffusion.

Alors que d’autres services d’intelligence artificielle ont généré un engouement pour l’invention d’images entièrement nouvelles, le remplissage génératif offre un moyen remarquablement convivial de modifier des parties d’images existantes. C’est ce qu’on appelle l’inpainting : sélectionnez ce que vous voulez remplacer et tapez ce qui doit y aller. Ce saut rapproche l’IA des vraies photos et un abonnement mensuel de 10 $ à Photoshop la met entre beaucoup plus de mains. Cela va bien au-delà de la correction des imperfections et de l’amélioration des photos de vacances avec les outils d’IA existants de Google et d’autres.

Mais l’IA transforme-t-elle Photoshop en une machine ultime de deepfake ? La même technologie d’IA qui nous a aidés à supprimer les pigeons des instantanés nous a également permis de générer une image très convaincante d’un incendie entièrement fictif au Pentagone. (Lorsqu’une telle image est récemment devenue virale sur Twitter, elle a brièvement déplacé le marché boursier.) Pourtant, nous avons trouvé des limitations importantes à la fois inhérentes à la technologie et intentionnellement intégrées à Photoshop qui empêchent certaines utilisations potentielles de la technologie dans les pires cas. Au moins pour l’instant.

Quel type de Photoshopping l’IA peut-elle faire, et ne pas faire ? Laissez-nous vous montrer.

Ce que Photoshops AI fait bien

Lorsque vous utilisez le remplissage génératif, vous devez être en ligne. C’est parce que Photoshop envoie trois informations à Adobes AI pour traitement : le texte d’une invite que vous entrez, la zone que vous avez sélectionnée pour remplacer et une partie du reste de l’image avec laquelle il essaie de se fondre.

Toutes ces informations rendent le remplissage génératif extrêmement efficace pour supprimer les objets des arrière-plans, tels que les tours radio dans cette scène de coucher de soleil :

L’IA est capable d’inventer des nuages, des arbres ou même des paysages urbains entiers pour se fondre dans votre image d’origine. Vous pouvez utiliser le remplissage génératif pour supprimer votre mémoire de foules luttant sur une destination de vacances ou même la personne avec qui vous avez voyagé.

Supprimer des personnes des images est un jeu d’enfant, même sur des arrière-plans complexes.

La même IA peut également ajouter de nouveaux objets dans des images qui n’étaient jamais là, comme le robot géant que vous voyez dans notre coucher de soleil ci-dessous.

Lorsque cela fonctionne bien, cela permet d’économiser des heures d’efforts incalculables : Photoshopper des éléments dans des images avant que l’IA ne nécessite d’être doué pour découper des objets, savoir comment utiliser des calques, trouver une image source à ajouter et ajuster l’éclairage et la couleur.

Peut-être que vous ne pouvez pas imaginer avoir besoin d’ajouter un robot géant à l’une de vos photos. Mais les artistes ou même simplement le photographe officiel de votre famille pourraient y voir un tremplin créatif qui leur permet d’essayer une idée folle. Nous avons également trouvé l’émerveillement de ce génie de l’imagination instantanée particulièrement excitant pour les enfants, dont trois se sont réunis autour de notre ordinateur pour émettre des commandes à tester.

Ce qui est le plus impressionnant, c’est que l’IA peut s’assurer que vos images se fondent avec l’angle du soleil, les ombres ou même un reflet visible dans l’eau. Il vous donne même le choix entre trois variantes ou vous pouvez continuer à peaufiner votre invite et votre zone de sélection jusqu’à ce que vous en trouviez une que vous aimez.

Une autre utilisation fascinante : faire en sorte que l’IA élargisse le cadre ou le recadrage d’origine d’une image en inventant à quoi pourrait ressembler le reste. Sur les réseaux sociaux, les internautes s’amusent à appliquer cette technique sur des œuvres d’art, des pochettes d’albums et des photos. Voici comment l’IA a élargi la célèbre peinture de chambre de Vincent van Gogh :

Ce que Photoshops AI fait mal

Pour chaque Whoa, c’est plutôt bien ! nous avons eu environ cinq Oh, c’est tellement de mauvaises réponses de Photoshops AI. Mais avec de la patience, nous avons finalement pu produire ce que nous recherchions.

Le problème principal : Photoshops AI n’est tout simplement pas génial pour générer certains types d’objets, qui peuvent sembler maladroits, à moitié dessinés ou tout simplement totalement faux.

Prenez, par exemple, la même image d’une vache dans un champ d’en haut. Lorsque nous avons demandé à l’IA d’ajouter un cow-boy, nous avons obtenu ceci :

Cette mauvaise réponse est en partie fonction du caractère aléatoire de la technologie actuelle de l’IA générative et du fait qu’Adobe s’est davantage concentré sur la formation de ses systèmes pour créer des images d’aspect naturel.

Il y a certains objets pour lesquels je pense qu’il réussit mieux que d’autres, mais quand vous commencez à devenir un peu plus surréaliste, un peu fou, ce n’est pas encore tout à fait là, nous a dit Maria Yap, vice-présidente de l’imagerie numérique d’Adobe.

Adobe a également déclaré que son modèle d’IA n’était pas conçu pour être sombre. Pourtant, à travers de nombreux tests, nous avons remarqué une tendance de l’IA à opter pour le macabre. Voici un exemple d’une photo originale prise d’un avion où nous avons demandé à l’IA d’ajouter un vaisseau spatial extraterrestre. Au lieu de cela, nous avons eu un monstre volant.

La zone que vous sélectionnez dans l’image d’origine fait une grande différence dans votre sortie. Adobes AI est conçu pour répondre à la forme de la sélection et tout ce qui s’y trouve sera complètement remplacé. Cela signifie que si vous souhaitez ajouter un chapeau à quelqu’un, vous devez sélectionner uniquement la zone où le chapeau irait idéalement dans la forme générale d’un chapeau.

Voici ce qui s’est passé lorsque nous avons demandé à l’IA de donner des chapeaux amusants aux membres de l’équipe du service d’assistance de The Posts en dessinant simplement une boîte autour de nos cinq têtes. Au lieu de chapeaux, nous avons de nouvelles têtes de balle de ping-pong.

Et en parlant de gens, Photoshops AI est tout simplement horrible avec eux. En voici une où nous avons demandé à l’IA d’ajouter un membre supplémentaire à une autre photo de l’équipe du Help Desk.

Cette pauvre dame. Nous n’avons jamais pu faire en sorte que l’IA crée une personne qui avait l’air d’avoir un visage normal.

Sera-t-il utilisé pour le mal ?

La technologie peut faire ressortir le meilleur et le pire chez les gens. Et déjà, certains utilisent des outils d’image d’IA plus compliqués pour créer des images à tromper et à exploiter : les campagnes politiques ont diffusé des publicités présentant des scènes générées par l’IA qui ne se sont jamais produites. Le FBI a récemment émis un avertissement concernant les stratagèmes de sextorsion deepfake.

Est-ce que Photoshops AI met les outils de la contrefaçon entre beaucoup plus de mains ? Oui et non.

En guise de test, nous avons pris une photo d’une randonnée dans un champ aride et tapé add wildfire. Il l’a transformé en une photo très crédible d’un incendie complètement fictif. (En fait, il était plus facile de faire en sorte que l’IA ajoute un feu de forêt réaliste à l’image que de lui faire ajouter des fleurs sauvages réalistes.)

Nous avons même pu utiliser l’IA pour supprimer notre propre filigrane sur les images signalant qu’elles avaient été modifiées par l’IA. Cette même capacité pourrait être utilisée pour supprimer les filigranes sur les images professionnelles payantes, telles que celles vendues par Getty Images ou les photographes de la ligne d’arrivée du marathon.

Mais en termes pratiques, il existe également certaines limites à l’utilisation abusive potentielle d’AI Photoshop aujourd’hui. Tout d’abord, la résolution de toutes les zones qu’elle remplit est limitée à une clarté de 1 024 par 1 024 pixels, bien que Photoshop la mette à l’échelle pour combler le trou. Cela signifie que les images seront visiblement floues si vous essayez de manipuler une grande partie à la fois.

Adobe dit qu’il établit également certaines limites dans ses produits d’IA. Premièrement, une fois que cette version de Photoshop sortira de la version bêta, elle inclura automatiquement les soi-disant informations d’identification de contenu dans les fichiers qu’elle produit, qui signaleraient si une image a été modifiée avec l’IA. Cependant, cela n’était pas disponible dans la version que nous avons testée.

Adobe affirme que les images produites par son IA sont prétraitées pour le contenu qui enfreint nos conditions d’utilisation, comme le contenu pornographique. Lorsqu’il détecte un contenu en infraction, il empêche l’invite d’être réutilisée.

Nous avons trouvé que c’était aléatoire : parfois, c’était trop sensible, comme nous arrêter lorsque nous demandions d’ajouter un OVNI à une image. D’autres fois, cela ne semblait pas assez sensible, comme lorsque nous avons demandé d’ajouter le visage d’un bébé à une photo infâme de Kim Kardashian qui a fait exploser Internet.

Nous sommes heureux qu’Adobe dise qu’il prend la menace au sérieux grâce à un effort de l’industrie appelé Content Authenticity Initiative, mais le jury ne sait pas si cela suffira. Une vision de la nouvelle technologie d’IA est que, eh bien, vous obtenez le mauvais avec le bon. Nous n’avons pas à accepter cela : en tant qu’êtres humains, nous devons décider comment maximiser le bien et minimiser le mal dans les outils que nous créons.