CapCut lance Seedance 2.0, l'IA capable de générer des vidéos hyper réalistes

CapCut lance Seedance 2.0, l’IA capable de générer des vidéos hyper réalistes

Les créateurs de TikTok viennent d’annoncer le lancement d’une IA capable de générer des clips vidéo au sein de CapCut. Quelques semaines après être devenu viral avec une vidéo de combat entre Brad Pitt et Tom Cruise, Dreamina Seedance 2.0 arrive officiellement sur votre éditeur vidéo. ByteDance a annoncé le déploiement de son nouveau modèle, profitant du fait qu’il a une voie claire en raison de la mort de Sora.

La société mentionne dans son communiqué que Seedance 2.0 combine la génération vidéo et audio dans un seul système. Cela signifie que l’utilisateur peut rédiger une description et obtenir un clip avec une image et un son synchronisés sans avoir besoin d’outils supplémentaires. Selon ByteDance, le modèle fonctionne bien même lorsque les images de référence ne sont pas fournies, même si le résultat final sera toujours meilleur tant qu’il y aura plus de contexte.

En termes de performances, beaucoup d’entre nous ont vu ce que Seedance 2.0 peut réaliser. La société chinoise mentionne que son IA gère les scènes avec des mouvements complexes, notamment celles où d’autres modèles ont des problèmes. Ses fonctionnalités incluent des textures détaillées, une physique réaliste, des changements d’angle et un éclairage cohérent tout au long du clip.

Ce dernier le rend particulièrement fonctionnel pour les vidéos d’action, de sport ou de science, où les mouvements doivent paraître crédibles. Dans le même temps, sa capacité à intégrer du texte et des graphiques dans une vidéo ouvre la porte à des utilisations plus pratiques, telles que des tutoriels de cuisine, des routines d’exercices ou des présentations de produits pour les petites entreprises.

Les clips Seedance 2.0 peuvent durer jusqu’à 15 secondes et sont disponibles dans six formats d’image différents pour être partagés sur TikTok et d’autres plateformes. Bien que l’objectif initial soit la génération de contenu, le modèle sera intégré à d’autres fonctions de la plateforme telles que AI Video et Video Studio dans les semaines à venir.

Seedance 2.0 fait la paix avec Holywood

L’arrivée de Seedance 2.0 ne pouvait pas mieux tomber pour ByteDance. Même si l’entreprise a lancé son modèle il y a quelques semaines, les vidéos de Brad Pitt et Tom Cruise ont fait sensation et les grands studios hollywoodiens ont réagi. En moins de 24 heures, ByteDance a reçu des lettres de cessation et d’abstention pour utilisation non autorisée de la propriété intellectuelle et a suspendu le déploiement de son IA.

L’entreprise a profité de ce temps pour ajuster les filtres et empêcher la création de contenu susceptible de porter atteinte au droit d’auteur. Le lancement de Seedance 2.0 intervient quelques jours après qu’OpenAI a annoncé la mort de Sora et abandonné toute tentative d’entrer dans le secteur de la vidéo IA. Sam Altman a préféré utiliser les ressources informatiques du Codex plutôt que de permettre aux utilisateurs de créer davantage de clips qui surchargeraient leurs centres de données.

Bien que Seedance 2.0 soit désormais disponible, ByteDance a mis en place certaines restrictions pour éviter des problèmes juridiques. Pour cette première phase, les comptes d’utilisateurs ne peuvent pas générer de vidéos à partir d’images ou d’enregistrements contenant de vrais visages. L’entreprise ne veut plus de polémique et a décidé de bloquer les deepfakes, au moins pendant un certain temps.

Seedance 2.0 dans CapCut

Un autre ajout est l’utilisation d’un filigrane invisible intégré aux vidéos IA. Contrairement aux filigranes que nous voyons sur CapCut, cette version persiste même si le contenu est modifié ou distribué en dehors de TikTok. Seedance 2.0 utilise également les informations d’identification C2PA, une norme qui permet à d’autres plateformes de vérifier si une vidéo a été générée avec l’intelligence artificielle.

ByteDance a annoncé que Seedance 2.0 sera disponible à partir d’aujourd’hui pour les utilisateurs payants au Mexique, au Brésil et dans d’autres pays d’Asie du Sud-Est. Le déploiement sera progressif, permettant d’ajuster les garanties à mesure que le modèle évolue. Pour l’instant, il n’y a aucun détail sur son lancement en Espagne et dans le reste du monde.

A lire également