OpenAI Killer de Google : l'IA multimodale Lumiere dévoilée, peut créer des vidéos de 5 secondes à partir de texte et d'images
Google a lancé son dernier modèle d'IA. Appelé Lumiere, l'outil de génération vidéo multimodal est capable de produire des vidéos réalistes de 5 secondes en utilisant uniquement du texte ou des images fixes comme invites.
Google se met dans une position où il peut contester la domination d'OpenAI sur l'IA.
Google a présenté son dernier modèle d'intelligence artificielle, Lumiere, un outil de génération vidéo multimodale capable de produire des vidéos réalistes de 5 secondes.
Lumiere prend en charge la génération de texte en vidéo et d'image en vidéo, en utilisant une architecture Space-Time U-Net (STUNet) pour améliorer le réalisme du mouvement dans les vidéos générées par l'IA.
Articles Liés
Vue | Pourquoi le monde pense que les talents indiens construiront l’avenir de l’IA
90 secondes avant la destruction : qu'est-ce que l'horloge de la fin du monde et que dit-elle pour 2024 ?
Contrairement aux modèles existants tels que Runway Gen-2 et Pika 1.0, Lumiere n'a pas encore été rendu public.
Selon un article pré-imprimé accompagnant le communiqué, l'innovation de Lumière réside dans la génération de la vidéo entière en un seul processus plutôt que de combiner des images fixes.
Cette approche permet la création simultanée d'aspects spatiaux (objets dans la vidéo) et temporels (mouvements dans la vidéo), résultant en une perception plus naturelle du mouvement.
Lumiere génère 80 images, contre 25 images de Stable Diffusion, en utilisant un sous-échantillonnage et un suréchantillonnage spatial et temporel et en exploitant un modèle de diffusion texte-image pré-entraîné.
Bien que Lumiere ne soit pas disponible pour les tests, son site Web présente diverses vidéos créées à l'aide du modèle d'IA, ainsi que les invites textuelles et les images d'entrée correspondantes.
L'outil peut produire des vidéos dans différents styles, créer des cinémagraphes pour animer des parties vidéo spécifiques et effectuer une inpainting en complétant des vidéos ou des images masquées en fonction d'invites.
Lumiere de Google est en concurrence avec les modèles d'IA existants comme Runway Gen-2 (lancé en mars 2023) et Pika 1.0 de Pika Lab, tous deux accessibles au public.
Alors que Pika peut créer des vidéos de 3 secondes (extensibles jusqu'à 4 secondes supplémentaires), Runway peut générer des vidéos d'une durée maximale de 4 secondes. Les deux modèles offrent des capacités multimodales et prennent en charge le montage vidéo.
(Avec la contribution des agences)
-
Enfin un article qui m’inspire.
-
Jetez un coup d'oeil ici, et vous le découvrirez certainement.
-
En voilà une opinion à ne pas prendre à la légère
-
Ok, rendez-vous aux prochaines publications
-
Seriez-vous intéressé par un échange de liens ?
-
Je ne suis pas entièrement d’accord, mais je respecte l’idée
-
Je pense vraiment que ce site a besoin de beaucoup plus de considération. Je serai probablement de nouveau pour lire beaucoup plus, merci pour cette information.
-
Merci, je partage l’article.
-
Merci, je partage l’article.
-
C’est justement ce que je me suis demandé.
-
Oh que c’est bien dit
-
J'ai définitivement apprécié chaque petit morceau de celui-ci et je vous ai mis en signet pour vérifier de nouvelles choses que vous blog post.
-
Oui, très bien vu
-
Je dois vérifier avec vous ici. Ce qui n'est pas quelque chose que je fais habituellement ! J'aime lire un article qui fait réfléchir les gens. Aussi, merci de me permettre de commenter !
-
C’est justement ce que je me suis demandé.
-
Ce site web est vraiment une promenade à travers toutes les informations que vous vouliez à ce sujet et ne savait pas qui demander.
-
C’est super, merci
-
C’est parfait pour orienter mon choix.
-
Non, je ne partage pas le même avis.
-
Jetez un coup d'oeil ici, et vous le découvrirez certainement.
-
Il y a une certaine validité mais je vais garder mon opinion jusqu'à ce que j'y regarde de plus près.
-
Non, je ne partage pas le même avis.
-
Lorsque j'ai fait mon premier commentaire, j'ai cliqué sur la case -M'avertir lorsque de nouveaux commentaires sont ajoutés- et maintenant, chaque fois qu'un commentaire est ajouté, je reçois quatre e-mails avec le même commentaire. Y a-t-il un moyen de me retirer de ce service ? Merci !
-
En voilà une opinion à ne pas prendre à la légère
-
J’en avais vraiment besoin
-
Oui, très bien vu
-
Une discussion intéressante mérite d'être commentée. Je pense que vous devriez écrire plus sur ce sujet, il pourrait ne pas être un sujet tabou, mais généralement les gens ne sont pas assez pour parler sur ces sujets. Au suivant. Santé
-
Merci, je partage l’article.
-
Une discussion intéressante mérite d'être commentée. Je pense que vous devriez écrire plus sur ce sujet, il pourrait ne pas être un sujet tabou, mais généralement les gens ne sont pas assez pour parler sur ces sujets. Au suivant. Santé
-
Oui mais on fait avec ce qu’on a.
-
Bonne réception, merci
-
Il faudrait résumer juste un peu
-
Un partage impressionnant, je viens de le donner à un collègue qui faisait une petite analyse sur ce sujet. Et en fait, il m'a payé le petit déjeuner parce que je l'ai trouvé pour lui... sourire. Donc, laissez-moi reformuler cela : Merci pour le plaisir ! Mais oui, merci d'avoir pris le temps de discuter de ce sujet, j'y tiens beaucoup et j'adore en lire plus sur ce sujet. Si possible, au fur et à mesure de votre expertise, pourriez-vous mettre à jour votre blog avec plus de détails ? C'est très utile pour moi. Un grand bravo pour cet article de blog !
-
Non, je ne partage pas le même avis.
-
Ceci a vraiment répondu à mon problème, merci !
-
C’est justement ce que je me suis demandé.
-
Bonjour ! Je voudrais juste donner un énorme coup de pouce pour les grandes informations que vous avez ici sur ce poste. Je vais revenir à votre blog pour plus bientôt.
-
Il faudrait résumer juste un peu
-
Il y a manifestement beaucoup de choses à savoir sur ce sujet. Je suppose que vous avez également fait quelques remarques intéressantes sur les caractéristiques.
-
Un partage impressionnant, je viens de le donner à un collègue qui faisait une petite analyse sur ce sujet. Et en fait, il m'a payé le petit déjeuner parce que je l'ai trouvé pour lui... sourire. Donc, laissez-moi reformuler cela : Merci pour le plaisir ! Mais oui, merci d'avoir pris le temps de discuter de ce sujet, j'y tiens beaucoup et j'adore en lire plus sur ce sujet. Si possible, au fur et à mesure de votre expertise, pourriez-vous mettre à jour votre blog avec plus de détails ? C'est très utile pour moi. Un grand bravo pour cet article de blog !
-
C’est rassurant de voir çà
-
C’est super, merci
-
Je préférerais utiliser une partie de ce contenu sur mon blog, si cela ne vous dérange pas. naturellement je vais vous donner un lien sur votre blog Web. Merci de partager.
-
Ce site web est vraiment une promenade à travers toutes les informations que vous vouliez à ce sujet et ne savait pas qui demander.
-
Votre idée est exceptionnelle ; la question est quelque chose que pas assez de gens parlent intelligemment. Je suis très heureux d'être tombé sur ce site alors que je cherchais quelque chose à ce sujet.
-
Vous êtes tellement cool ! Je ne pense pas avoir lu quelque chose comme ça avant. Si agréable de trouver quelqu'un avec quelques pensées originales sur ce sujet. realy merci pour le démarrage de cette up. ce site est quelque chose qui est nécessaire sur le web, quelqu'un avec un peu d'originalité. travail utile pour apporter quelque chose de nouveau à l'Internet !
-
Tellement j’avais besoin de conseils
-
C’est super, merci
-
Bonne réception, merci
-
Je suis heureux d’avoir tombé sur vos articles,
50 Vos remarques
Dans la même catégorie