Avec le développement rapide des technologies d'IA générative, le domaine de la création vidéo connaît une révolution. Récemment, AIbase a appris par les réseaux sociaux et d'autres canaux que Moonvalley a annoncé une nouvelle fonctionnalité pour son modèle vidéo Marey : Sketch-to-Video. Cette fonction permet aux utilisateurs de générer des séquences vidéo de qualité cinéma uniquement à partir de descriptions textuelles et de croquis sommaires, offrant une commodité et une liberté créative sans précédent pour la production cinématographique, les idées publicitaires et les créations personnelles.
De la croquis à la vidéo : une nouvelle façon d'exprimer sa créativité
La fonctionnalité Sketch-to-Video de Moonvalley révolutionne radicalement le mode traditionnel de génération vidéo. Selon les informations recueillies par AIbase, il suffit aux utilisateurs de fournir des indications simples en texte et des croquis manuels pour que le modèle Marey génère des séquences vidéo de haute qualité respectant les lois physiques du réel. Cette fonction permet la transformation de croquis simples en lignes jusqu'à des scènes complexes, avec une résolution vidéo pouvant atteindre 1080p, un taux de rafraîchissement de 24 images par seconde et une durée maximale de 5 secondes, répondant ainsi aux besoins fondamentaux de la production cinématographique professionnelle.
Contrairement aux modèles de génération traditionnels qui dépendent de mots-clés complexes, Sketch-to-Video utilise une entrée visuelle intuitive, permettant même aux non-professionnels de s'en servir facilement. Que ce soit pour la prévisualisation par les réalisateurs, la création de maquettes rapides par les créatifs publicitaires ou l'exploration de l'expression artistique par les créateurs indépendants, cette fonction réduit considérablement les barrières à la création. AIbase estime que l'annonce de Sketch-to-Video marque un changement important de la « technologie comme moteur » à la « créativité comme moteur » dans la génération vidéo par IA.
Modèle Marey : contrôle précis et garantie éthique
La fonctionnalité Sketch-to-Video repose sur le modèle Marey de Moonvalley, un outil de génération vidéo par IA conçu spécifiquement pour la production professionnelle. Selon les rapports, le modèle Marey n'utilise que des matériaux vidéo haute définition entièrement autorisés pour son entraînement, évitant ainsi les litiges liés au droit d'auteur causés par des sources de données incertaines. Cette caractéristique de « sécurité commerciale » lui vaut un grand intérêt dans Hollywood et l'industrie publicitaire, et a déjà été utilisé dans des projets pilotes par plusieurs grandes studios de production et sociétés publicitaires, tels que la réalisation du documentaire HBO "Menudo: Forever Young".
Une autre grande force du modèle Marey réside dans sa puissance de contrôle. La fonction Sketch-to-Video ne supporte pas seulement les croquis et les indications textuelles, mais permet également aux utilisateurs de simuler les mouvements de caméra dans des prises de vue réelles via le « contrôle de la caméra », ou d'ajuster les trajectoires des objets dans une scène via le « contrôle du mouvement ». AIbase a remarqué que des utilisateurs ont signalé que les vidéos générées par cette fonction sont fines, fluides, et presque sans défauts visibles, comparables aux effets de prises de vue professionnelles.
Réduction des coûts de création : soutenir les créateurs du monde entier
La fonctionnalité Sketch-to-Video de Moonvalley réduit significativement les coûts et le temps nécessaires à la production vidéo. La production traditionnelle de films exige des équipements onéreux et un traitement postérieur complexe, tandis que le modèle Marey simplifie ces processus en quelques clics grâce à la technologie de l'IA. Les retours de l'industrie montrent que les coûts de production peuvent être réduits de 40 % grâce à l'utilisation de Marey, ce qui est particulièrement important pour les cinéastes indépendants ou les marques de petite à moyenne taille disposant de budgets limités.
De plus, la conception accessible de Sketch-to-Video offre davantage d'opportunités aux créateurs du monde entier. AIbase a appris que Moonvalley collabore avec des plateformes comme Vimeo pour obtenir un grand nombre de matériaux B-roll de films indépendants, assurant ainsi la diversité et la légitimité des données d'entraînement. Cette initiative protège non seulement la sécurité des droits d'auteur, mais aussi offre également une plateforme égale aux groupes marginalisés, permettant à plus de voix d'être entendues.
Avenir : itérations continues et expansion de l'écosystème
Moonvalley affirme que Sketch-to-Video n'est qu'un début pour l'extension des fonctionnalités du modèle Marey. Au cours des prochains mois, l'entreprise prévoit de lancer davantage de fonctionnalités avancées, telles qu'un contrôle plus précis de la lumière, un ajustement plus approfondi des trajectoires des objets et une bibliothèque d'objets étendue. Ces mises à jour amélioreront davantage les performances du modèle dans des scènes complexes, répondant ainsi à des besoins variés allant des courts métrages aux longs métrages.
AIbase a également appris que Moonvalley développe une plateforme dédiée nommée Voyager, actuellement en phase de test sous invitation. Cette plateforme intégrera toutes les fonctionnalités de Marey, offrant aux utilisateurs professionnels un flux de travail plus efficace. Sur les réseaux sociaux, la communauté des développeurs exprime un grand enthousiasme pour cette plateforme, estimant qu'elle pourrait devenir le « nouveau standard » de la production cinématographique par IA.
Impact industriel : une intégration approfondie entre l'IA et la création cinématographique
Lancement de Sketch-to-Video renforce davantage la position de leadership de Moonvalley dans le domaine de la génération vidéo par IA. Comparé à des concurrents tels que Sora d'OpenAI ou Veo3 de Google, le modèle Marey gagne une reconnaissance élevée de l'industrie grâce à ses données d'entraînement éthiques et à ses fonctions de contrôle précis. AIbase estime que cette fonctionnalité n'apporte pas seulement une vitalité créative supplémentaire à l'industrie du cinéma, mais établit également un jalon éthique pour l'application de la technologie de l'IA dans le domaine créatif.