Luma lance des agents créatifs d'IA alimentés par ses nouveaux modèles d'‘Intelligence Unifiée’

Luma lance des agents créatifs d'IA alimentés par ses nouveaux modèles d'‘Intelligence Unifiée’

La startup de génération vidéo par IA, Luma, a lancé jeudi les Luma Agents, conçus pour gérer l'ensemble du travail créatif à travers le texte, l'image, la vidéo et l'audio. Les Luma Agents sont alimentés par la famille de modèles Intelligence Unifiée de la startup, avec une architecture entraînée sur un système de raisonnement multimodal unique.

Les Luma Agents sont présentés comme une nouvelle méthode de travail pour les agences de publicité, les équipes marketing, les studios de design et les entreprises. Luma affirme que ses agents sont capables de planifier et de générer du texte, des images, des vidéos et de l'audio tout en coordonnant avec d'autres modèles d'IA, y compris Ray 3.14 de Luma, Veo 3 de Google, Nano Banana Pro, Seedream de ByteDance et les modèles vocaux d'ElevenLabs.

Les agents de Luma reposent sur le modèle Uni-1, le premier de sa famille de modèles d'IA Intelligence Unifiée. Selon Amit Jain, directeur général et co-fondateur de Luma, ce modèle a été entraîné sur l'audio, la vidéo, l'image, le langage et le raisonnement spatial.

Jain a déclaré à TechCrunch que le modèle Uni-1 peut "penser en langage et imaginer et rendre en pixels ou images… nous l'appelons ‘intelligence en pixels’." D'autres capacités de sortie comme l'audio et la vidéo seront disponibles dans les versions ultérieures du modèle, a-t-il ajouté.

« Nos clients n'achètent pas l'outil ; ils redéfinissent la manière de faire des affaires », a déclaré Jain.

Luma a déjà commencé à déployer sa nouvelle plateforme agentique avec des clients existants, y compris les agences de publicité mondiales Publicis Groupe et Serviceplan, ainsi que pour des marques comme Adidas, Mazda et la société saoudienne d'IA Humain.

Jain a affirmé que les Luma Agents sont révolutionnaires car ils peuvent maintenir un contexte persistant à travers les actifs, les collaborateurs et les itérations créatives. Ils peuvent également évaluer et affiner les résultats, améliorant ainsi leurs propres performances grâce à une auto-critique itérative, selon Jain.

Cette capacité d'auto-évaluation est ce qui a rendu les agents de codage si utiles, a déclaré Jain. « Vous avez besoin de cette capacité à évaluer votre travail, à le corriger et à faire cette boucle jusqu'à ce que la solution soit bonne et précise. »

Jain a indiqué que le flux de travail actuel pour l'utilisation des outils d'IA dans les environnements créatifs ne présente pas la même accélération des avantages que les professionnels de l'industrie créative attendent de l'IA. Au lieu de cela, c'est plutôt : « Voici 100 modèles. Apprenez à les interroger », a-t-il dit.

Il a ajouté que ce qui rend les Luma Agents différents, c'est que vous n'avez pas besoin de faire des allers-retours pour chaque itération sur une image ou une idée — le système génère plutôt de grands ensembles de variations et permet aux utilisateurs de diriger la conversation.

« Avec l'Intelligence Unifiée, parce que ces modèles comprennent en plus d'être capables de générer, nous sommes en mesure de construire un système capable de réaliser ce type de travail de bout en bout », a déclaré Jain.

Prenons, par exemple, un architecte humain concevant un bâtiment. Au fur et à mesure qu'il trace les lignes, il crée une représentation mentale interne de la structure, de la lumière, des dynamiques spatiales et de l'expérience vécue. Cela, selon Jain, est le même principe sur lequel repose l'Intelligence Unifiée.

Jain a déclaré que le système pourrait considérablement accélérer les flux de travail créatifs. Lors d'une démonstration, il a montré comment un brief de 200 mots et une image d'un produit (un tube de rouge à lèvres) ont conduit le système à générer diverses idées pour des lieux, des modèles et des palettes de couleurs pour une campagne publicitaire.

Dans un autre exemple, les Luma Agents ont transformé une campagne publicitaire d'un an de 15 millions de dollars d'une marque en plusieurs annonces localisées pour différents pays en 40 heures pour moins de 20 000 dollars, en respectant les contrôles de qualité internes et les vérifications de précision de la marque, a déclaré Jain.

Bien que les Luma Agents soient désormais disponibles publiquement via API, Jain a indiqué que la startup prévoit de déployer l'accès progressivement pour garantir que les utilisateurs maintiennent un accès fiable et évitent les interruptions de flux de travail.