Movie Gen de Meta peut créer des vidéos et des fichiers audio étranges
La prochaine étape naturelle dans l’ère de l’IA générative concerne les vidéos génératives, mais c’est beaucoup plus complexe que la simple génération d’images ou de texte. Movie Gen AI de Meta veut être une interface complète pour tous vos besoins en matière de génération vidéo, mais elle n'est toujours pas accessible au public.
Meta a annoncé Movie Gen, un nouvel ensemble de modèles d'IA génératifs capables de créer et d'éditer des vidéos et de l'audio à l'aide d'invites textuelles. Les modèles surpasseraient les modèles similaires du secteur et représenteraient une avancée significative dans la création multimédia basée sur l’IA. Movie Gen vous permettra de générer des vidéos d'une durée maximale de 16 secondes à partir d'invites de texte, ainsi que de générer des vidéos mettant en vedette une personne spécifique en fonction de son image et d'une invite de texte. Vous pouvez également éditer des vidéos existantes à l'aide d'invites de texte, en ajoutant, supprimant ou remplaçant des éléments avec précision, et il peut même créer un son d'une durée maximale de 45 secondes synchronisé avec le contenu vidéo, y compris le son ambiant, les effets sonores et la musique de fond, pour allez avec ces vidéos générées.
La génération vidéo est un sujet sur lequel l'entreprise travaille depuis longtemps, et maintenant, ces efforts sont enfin plus proches d'un produit fini. Meta affirme que Movie Gen obtient des résultats de pointe dans plusieurs domaines, notamment la qualité vidéo, la personnalisation, la précision du montage et l'alignement audio-vidéo. L'entreprise attribue ces réalisations aux innovations techniques en matière d'architecture de modèle, de données de formation et de méthodes d'évaluation. La société vise à collaborer à terme avec des cinéastes et des créateurs pour garantir que Movie Gen devienne un outil précieux d'expression créative. Les applications potentielles de Movie Gen incluent la création de vidéos animées pour les réseaux sociaux, la génération de salutations personnalisées et l'édition de vidéos à l'aide de commandes de texte simples.
Meta ne nous donne pas de calendrier réel pour le moment où nous pourrions nous attendre à vérifier cela. La génération de vidéos IA, en général, en est actuellement à ses débuts et nous ne disposons pas de modèles aussi avancés que les modèles image/texte le sont actuellement. Cela pourrait changer cela s’il sort bientôt.