Adobe rolt de publieke bèta uit voor zijn Firefly AI Assistant transformeert later deze maand complexe creatieve workflows in een eenvoudige chatinterface voor applicaties zoals Photoshop, Premiere, Illustrator of Lightroom. Jij typt wat je wilt en de AI verbindt achter de schermen de punten om het te laten gebeuren. Omdat het een multimodale interface is, kan deze indien nodig nauwkeurig worden ingesteld via contextbewuste bedieningspanelen, naast de op tekst gebaseerde prompt. Het is een eerste stap in wat creatieve apps in de toekomst zouden kunnen worden, waarbij de complexiteit van gebruikersinterfaces wordt weggenomen en de krachtige controle behouden blijft.
Als het eindproduct werkt zoals de demo, zal de nieuwe Firefly AI Assistant de manier waarop mensen omgaan met ontwerpsoftware fundamenteel veranderen, door de sleutels van het ommuurde professionele creatieve kasteel te geven aan iedereen die bereid is het geld te betalen, in gewoon Engels te typen en schuifregelaars te verplaatsen die contextueel verschijnen om aspecten van hun creaties te verfijnen wanneer dat nodig is. In plaats van nieuwkomers te dwingen een doolhof van menu’s, geneste paletten en pop-ups uit het hoofd te leren, laat de assistent hen complexe resultaten bereiken door simpelweg te vragen.
Tegelijkertijd is de nieuwe assistent de eerste opstap naar een nieuw soort automatisering voor professionals. Het geeft veteranen een snelle manier om het saaie gruntwerk te omzeilen waarvan ze al weten hoe het moet. “We hebben het hele spectrum van mensen die nieuw zijn in onze franchise en die de volledige kracht van Photoshop niet kennen en die geweldige bewerkingen willen uitvoeren. Ze kunnen het ook gebruiken en gewoon met de assistent praten”, vertelde Adobe’s vice-president van AI en innovatie, Alexandru Costin, mij in een interview. “Aan de andere kant van het spectrum kunnen de creatieve professionals die onze tools volledig begrijpen, deze middelen daadwerkelijk overnemen en ze blijven bewerken in onze tools.”
Deze tool is voortgekomen uit Project Moonlight, dat Adobe vorig jaar op de MAX-conferentie plaagde en testte in een privébèta. Het kernidee kwam rechtstreeks van werkende professionals die op zoek waren naar een moderne upgrade van Photoshop Actions, een decennia oude functie waarmee gebruikers muisklikken kunnen opnemen en afspelen. Acties werken alleen voor vaste, herhaalbare taken, zoals het aanpassen van de tint en verzadiging van duizend afbeeldingen met behulp van vaste waarden. Maar gebruikers wilden een slimmer type automatiseringsagent die zich kon aanpassen aan wat de agent in elke afbeelding, video of illustratie ziet. Adobe besloot iets te creëren dat verder gaat dan de basisbewerking, door dingen op de media te veranderen op basis van de context en inhoud van de afbeelding of video zelf, en zelfs nieuwe afbeeldingen, modellen en eventuele kandidaten voor kunst te creëren.
De nieuwe, slimme ‘Photoshop Actions’
“Bij Adobe MAX ontmoette ik een grote groep professionals om hen te vragen naar een agent”, vertelt Costin, waarbij hij de industriële term gebruikt voor een kunstmatige intelligentie die actief namens u taken in meerdere stappen uitvoert in verschillende software. “Ze zeiden: ‘Kijk, ik zou het leuk vinden als je me een knop geeft, zoals Photoshop-acties, waarbij ik in een agent kan opnemen wat ik aan het doen ben en de agent het dan voor me laat afspelen, zodat ik in principe kan beslissen… deze automatisering doet de dingen op mijn manier’.”
Hoewel de nieuwe Firefly AI-assistent nog steeds twee beperkingen heeft die hem geen directe vervanging maken – hierover later meer – heeft hij zeker het potentieel om een enorme tijdsbesparing te betekenen voor elke professional die met een ploeg AI-bots wil werken.
Om dat soort automatisering mogelijk te maken, heeft Adobe Creative Skills ontwikkeld. De AI leert in de loop van de tijd hoe een specifieke maker graag werkt, pikt zijn favoriete tools en visuele stijl op en kan die kennis toepassen om uw bestanden te beheren. “Je kunt je specifieke smaak of aanpak als creatieve professional beschrijven en deze vervolgens ‘spelen’ met het Firefly AI-systeem, zodat je tijd bespaart en een deel van je werk kunt automatiseren, zodat je meer tijd hebt voor creativiteit”, zegt Costin.
De huidige bèta biedt een standaardset standaardvaardigheden om mee te beginnen, maar het volledig bewerkbaar en deelbaar maken van deze vaardigheden zal in een volgende versie komen (een van de beperkingen die het onderscheidt van Photoshop Actions, die volledig deelbaar zijn).
In plaats van te vertrouwen op rigide sjablonen, fungeert het systeem als een onafhankelijke digitale art director. Het evalueert actief de grondstoffen op uw canvas om de juiste context te achterhalen voordat u een zet doet, in plaats van alleen maar blindelings opdrachten uit te voeren op basis van filmmetagegevens. De software kaapt ook niet alleen uw cursor; het checkt voortdurend bij je in om duidelijk te maken wat je eigenlijk wilt bereiken en zorgt ervoor dat jij de aanjager blijft van het uiteindelijke kunstwerk.
Deze integratie gaat verder dan de eigen motoren van Adobe en breidt het platform uit naar toonaangevende AI-modellen van derden, waaronder Claude van Anthropic. Het sluit zich ook aan bij beoordelingsplatforms zoals Frame.io. Als een klant aantekeningen achterlaat over een project, kan de agent die feedback verwerken en zelf de revisies uitvoeren, waarbij hij de software kiest die de klus het beste afhandelt.
Het pad naar adaptieve interfaces met meerdere modellen
De assistent introduceert ook Precision Flow, waarmee de vervelende taak van het schilderen van pixel-perfecte meshes wordt vervangen door semantische bewerking. In plaats van met ruwe pixels om te gaan, herkent de AI de daadwerkelijke fysieke objecten binnen het frame, wetende dat een koffiekopje een kopje is en de bonen ernaast bonen zijn. “Met Precision Flow kun je generatieve AI gebruiken om een asset te bewerken, niet op pixelniveau, maar op de semantische kant”, zegt Costin. “Net als in dit geval weet het systeem dat dit een afbeelding is van koffie met koffiebonen, dus creëert het deze dynamische semantische schuifregelaars waarmee je vervolgens je afbeelding semantisch kunt wijzigen zonder dat je het opnieuw hoeft te vragen.”
Deze semantische mogelijkheid genereert automatisch nieuwe dashboards voor gedetailleerde controle. In het geval van het koffiekopje, waar de koffiebonen over de vloeibare koffie spatten, zien gebruikers een paneel met schuifregelaars zoals “Coffee Beans” en “Splash” die gebruikers kunnen verplaatsen om de hoeveelheid bonen of koffiespatten nauwkeurig te verhogen of te verlagen. Dit is de juiste stap voor toekomstige apps. Natuurlijke taal is een geweldig uitgangspunt, maar taal kan door de natuur worden geïnterpreteerd, wat tot onnauwkeurigheden en misverstanden kan leiden. Er zit geen onnauwkeurigheid in een schuifregelaar die de hoeveelheid koffiebonen in het beeld interactief en in realtime kan vergroten.
Omdat de Assistent rechtstreeks op Creative Cloud is aangesloten, worden standaardtools zoals tint en verzadiging rechtstreeks naar de hosttoepassing gestuurd. Het resultaat is geen dood afbeeldingsbestand; het genereert een native PSD-document, het standaardbestandsformaat van Adobe, waarin individuele bewerkingen op afzonderlijke, aanpasbare lagen worden gestapeld.
“Dit is eigenlijk een Photoshop-besturingselement waarbij, zodra je de bewerkingen achter de schermen uitvoert, we daadwerkelijk de PSD kunnen maken en die PSD in Photoshop wordt geladen”, zegt Costin. “Door een echte Photoshop-functie te gebruiken, wordt de volledige aanpassingslaag in Photoshop toegepast.”
De huidige bèta stuit echter nog steeds op een harde muur als het gaat om de geavanceerde semantische bewerkingen. Hoewel elk gangbaar regelpaneel – zoals HUE & Saturation – een bewerkbare laag in Photoshop genereert wanneer je Precision Flow gebruikt om objecten in de Assistent aan te passen, vertalen deze specifieke veranderingen zich nog niet in Photoshop als live, manipuleerbare schuifregelaars. “We hebben Precision Flow nog niet in Photoshop geïntegreerd. Je kunt je voorstellen dat dit ook naar Photoshop komt, maar ik denk niet dat we het nog aankondigen”, zegt Costin. “Als je deze bewerkingen nu uitvoert, is de afbeelding die naar Photoshop wordt verzonden een rasterafbeelding.”
Dit betekent dat de semantische aanpassingen arriveren als een afgeplatte, niet-bewerkbare laag pixels. Voor absolute beginners zal deze technische hindernis er niet zoveel toe doen, zolang het uiteindelijke beeld er maar goed uitziet. Voor de gevorderde professionals die Adobe voor het gerecht probeert te brengen, vermoed ik dat het eerder een tijdelijk ongemak zal zijn. Het zou heel fijn zijn om het te hebben, maar ik kan ook zonder.
Het is duidelijk dat de Firefly AI-assistent een enorme stap voorwaarts kan zijn om software voor de gebruiker te laten werken in plaats van andersom, waarbij je een AI de opdracht geeft om te doen wat jij wilt, waarbij de AI jouw werkstijl leert en alleen nauwkeurige bedieningselementen laat zien wanneer dat nodig is.
