La société de création de vidéos et de modèles 3D à l’aide de l’intelligence artificielle Luma a lancé un nouveau réseau neuronal, Ray3 Modify.
L’outil permet de modifier des vidéos existantes en utilisant des images de référence des personnages tout en conservant le jeu d’acteur de la vidéo originale.
Les utilisateurs peuvent indiquer les images clés de début et de fin pour que le modèle génère des matériaux intermédiaires.
La société a déclaré que Ray3 Modify résout les problèmes de conservation des caractéristiques de la personne lors de l’édition ou de la génération d’effets. Les LLM suivent mieux la vidéo d’origine, en conservant les mouvements, le timing, la direction du regard et la transmission des émotions. Cela permet aux studios d’utiliser des acteurs en direct dans des vidéos créatives.
Grâce à cette nouvelle solution, les utilisateurs peuvent définir un personnage de référence pour transformer la vidéo, en modifiant l’apparence de la personne. Les informations sur les costumes, la ressemblance extérieure et l’identité sont conservées tout au long du tournage.
« Les modèles vidéo génératifs sont incroyablement expressifs, mais difficiles à contrôler. Ray3 Modify combine la richesse et le monde réel, offrant aux professionnels de la création un contrôle total. Ils peuvent filmer des performances en direct, puis les modifier immédiatement : transformer le lieu, les costumes ou même « re-filmer » la scène avec l’IA sans présence physique répétée », a déclaré Amit Jain, co-fondateur et CEO de Luma AI.
Le nouveau modèle est disponible sur la plateforme Dream Machine. La sortie coïncide avec la levée de $900 millions d’investissements lors d’une levée de fonds dirigée par la société saoudienne Humain. Les investisseurs actuels du projet, tels que a16z, Amplify Partners et Matrix Partners, ont également participé.
La startup prévoit de construire un cluster IA de 2 GW en Arabie Saoudite en partenariat avec Humain.
Rappelons qu’en mai, des entreprises technologiques américaines ont signé un accord avec une société du pays arabe pour le développement massif du secteur de l’intelligence artificielle dans la région.
En décembre, la startup IA Runway a lancé un nouveau modèle vidéo, Gen 4.5, qui dépasse ses concurrents lors de tests indépendants.
Voir l'original
Cette page peut inclure du contenu de tiers fourni à des fins d'information uniquement. Gate ne garantit ni l'exactitude ni la validité de ces contenus, n’endosse pas les opinions exprimées, et ne fournit aucun conseil financier ou professionnel à travers ces informations. Voir la section Avertissement pour plus de détails.
Luma a lancé l'éditeur vidéo IA Ray3 Modify - ForkLog : cryptomonnaies, IA, singularité, avenir
La société de création de vidéos et de modèles 3D à l’aide de l’intelligence artificielle Luma a lancé un nouveau réseau neuronal, Ray3 Modify.
L’outil permet de modifier des vidéos existantes en utilisant des images de référence des personnages tout en conservant le jeu d’acteur de la vidéo originale.
Les utilisateurs peuvent indiquer les images clés de début et de fin pour que le modèle génère des matériaux intermédiaires.
La société a déclaré que Ray3 Modify résout les problèmes de conservation des caractéristiques de la personne lors de l’édition ou de la génération d’effets. Les LLM suivent mieux la vidéo d’origine, en conservant les mouvements, le timing, la direction du regard et la transmission des émotions. Cela permet aux studios d’utiliser des acteurs en direct dans des vidéos créatives.
Grâce à cette nouvelle solution, les utilisateurs peuvent définir un personnage de référence pour transformer la vidéo, en modifiant l’apparence de la personne. Les informations sur les costumes, la ressemblance extérieure et l’identité sont conservées tout au long du tournage.
Le nouveau modèle est disponible sur la plateforme Dream Machine. La sortie coïncide avec la levée de $900 millions d’investissements lors d’une levée de fonds dirigée par la société saoudienne Humain. Les investisseurs actuels du projet, tels que a16z, Amplify Partners et Matrix Partners, ont également participé.
La startup prévoit de construire un cluster IA de 2 GW en Arabie Saoudite en partenariat avec Humain.
Rappelons qu’en mai, des entreprises technologiques américaines ont signé un accord avec une société du pays arabe pour le développement massif du secteur de l’intelligence artificielle dans la région.
En décembre, la startup IA Runway a lancé un nouveau modèle vidéo, Gen 4.5, qui dépasse ses concurrents lors de tests indépendants.