TuSimple présente le grand modèle de génération vidéo 'Ruyi'

Pékin (Gasgoo)- Le 17 décembre, TuSimple a officiellement dévoilé son premier grand modèle de génération vidéo, "Ruyi", en publiant la version Ruyi-Mini-7B en open source. Les utilisateurs peuvent désormais télécharger le modèle sur Hugging Face, accompagné d'instructions détaillées pour le déploiement et de workflows ComfyUI pour une mise en œuvre rapide sur des GPU grand public, tels que le RTX 4090.  

Ruyi est conçu pour exceller en cohérence des cadres, fluidité des mouvements et rendu naturel des couleurs, ouvrant de nouvelles possibilités pour la narration visuelle. Le modèle est particulièrement optimisé pour les scénarios d'anime et de jeux, en faisant un outil créatif idéal pour les passionnés d'ACG (anime, bandes dessinées et jeux).  

TuSimple a souligné qu'à mesure que la concurrence s'intensifie dans le secteur du contenu généré par l'IA (AIGC), les applications pratiques stimuleront les avancées de l'IA générative. Le modèle Ruyi vise à réduire les cycles de développement et les coûts pour le contenu d'anime et de jeux en répondant à des points problématiques spécifiques de l'industrie.

La version actuelle de Ruyi prend en charge la génération basée sur des images clés, permettant aux utilisateurs d'entrer des images clés et de générer jusqu'à 5 secondes de vidéo suivante ou de produire des transitions fluides entre deux images clés. Les futures mises à jour affineront davantage la génération de contenu basée sur les scènes, y compris la création directe de séquences CUT, répondant à divers besoins créatifs. TuSimple prévoit de publier deux versions supplémentaires dans sa prochaine mise à jour pour offrir encore plus de flexibilité aux créateurs de contenu.