EXCLUSIEF: Luma lanceert creatieve AI-agenten, aangedreven door zijn nieuwe ‘Unified Intelligence’-modellen

AI-videogeneratie-startup Luma lanceerde donderdag Luma Agents, ontworpen om end-to-end creatief werk te verwerken in tekst, beeld, video en audio. Luma Agents wordt mogelijk gemaakt door de Unified Intelligence-modellenfamilie van de startup, waarbij de architectuur is getraind op één enkel multimodaal redeneersysteem.

Luma Agents wordt gepresenteerd als een nieuwe manier van werken voor reclamebureaus, marketingteams, ontwerpstudio’s en bedrijven. Luma zegt dat zijn agenten tekst, afbeeldingen, video en audio kunnen plannen en genereren terwijl ze samenwerken met andere AI-modellen, waaronder Luma’s Ray 3.14, Google’s Veo 3 en Nano Banana Pro, ByteDance’s Seedream en de stemmodellen van ElevenLabs.

De agenten van Luma zijn gebouwd op het Uni-1-model van de startup, het eerste van de Unified Intelligence-familie van AI-modellen. Het is getraind in audio, video, beeld, taal en ruimtelijk redeneren, aldus Amit Jain, CEO en medeoprichter van Luma.

Jain vertelde TechCrunch dat het Uni-1-model “in taal kan denken en zich kan voorstellen en weergeven in pixels of afbeeldingen … we noemen het ‘intelligentie in pixels’.” Andere uitvoerfuncties zoals audio en video zullen in volgende modelreleases verschijnen, voegde hij eraan toe.

“Onze klanten kopen de tool niet, ze veranderen de manier waarop zaken worden gedaan”, zegt Jain.

Luma is al begonnen met het uitrollen van zijn nieuwe bureauplatform bij bestaande klanten, waaronder de wereldwijde reclamebureaus Publicis Groupe en Serviceplan, maar ook voor merken als Adidas, Mazda en het Saoedische AI-bedrijf Humain.

Jain zei dat de Luma-agenten een game changer zijn omdat ze in staat zijn om een ​​persistente context te behouden tussen assets, samenwerkingspartners en creatieve iteraties. Ze kunnen de output ook evalueren en verfijnen en hun eigen resultaten verbeteren door middel van iteratieve zelfkritiek, aldus Jain.

Dit soort check-your-work-vermogen is wat codeeragenten zo nuttig heeft gemaakt, zei Jain. “Je hebt het vermogen nodig om je werk te evalueren, te repareren en te herhalen totdat de oplossing goed en accuraat is.”

Jain zei dat de huidige workflow voor het gebruik van AI-tools in creatieve omgevingen niet dezelfde versnelling van voordelen biedt die mensen in de creatieve industrie van AI verwachten. In plaats daarvan is het meer zoiets als: “Hier zijn honderd modellen. Leer hoe je ze kunt vragen”, zei hij.

Hij zei dat wat Luma Agents anders maakt, is dat je niet heen en weer hoeft te vragen voor elke iteratie van een afbeelding of idee. In plaats daarvan genereert het systeem grote reeksen variaties en laat het gebruikers de richting bepalen door middel van gesprekken.

“Met Unified Intelligence kunnen we, omdat deze modellen niet alleen kunnen genereren, maar ook een systeem bouwen dat dit soort end-to-end werk kan doen”, aldus Jain.

Neem bijvoorbeeld een menselijke architect die een gebouw ontwerpt. Terwijl ze de lijnen trekken, creëren ze een interne mentale representatie van de structuur, het licht, de ruimtelijke dynamiek en de geleefde ervaring. Dit is, zegt Jain, hetzelfde principe waarop Unified Intelligence is gebouwd.

Jain zei dat het systeem de creatieve workflows aanzienlijk zou kunnen versnellen. In een demonstratie liet Jain zien hoe een briefing van 200 woorden en een afbeelding van een product (een lippenstift) het systeem ertoe aanzetten verschillende ideeën te genereren voor plaatsingen, modellen en kleurenschema’s voor een advertentiecampagne.

In een ander voorbeeld zette Luma Agents de advertentiecampagne van een merk ter waarde van $15 miljoen, een jaar lang, in 40 uur om in meerdere gelokaliseerde advertenties voor verschillende landen voor minder dan $20.000, waarbij ze de interne kwaliteitscontrole en nauwkeurigheidscontroles van het merk doorstonden, aldus Jain.

Hoewel Luma Agents nu publiekelijk beschikbaar is via API, zegt Jain dat de startup van plan is de toegang geleidelijk uit te rollen om ervoor te zorgen dat gebruikers betrouwbare toegang behouden en onderbrekingen in de workflow voorkomen.