Des outils IA notés pour votre métier
Missions IA payées
🤝 Vous êtes dans la bibliothèque Libre & Open Source — des outils communautaires utilisables sans payer. Un concept différent de notre annuaire IA noté.
Accueil › Libre & Open Source › Vidéo › Text2Video-Zero
✦ Libre & open sourceVidéo

Text2Video-Zero

Génère et édite des vidéos cohérentes temporellement à l'aide de modèles de diffusion texte-image sans entraînement supplémentaire.

Génération et édition de texte en vidéo zero-shot

Transformez les pipelines de diffusion texte-image existants en générateurs de vidéos conditionnels et en éditeurs d'instructions.

Gratuit pour toujours · source-available · Licence not stated in the repository
✓ Needs IT✓ Dans le navigateur✓ Collaboration en temps réel
5.4
ZEKAI
Outil de génération de vidéos zero-shot
Libre & open source · Vidéo
Facilité d'installation4
Utilité8
Maintenance2
Communauté7.5
★ 4,243
GITHUB
May 2023
MIS À JOUR
Licence not stated in the repository
LICENCE
🛠 Pas envie de l'héberger vous-même ? Nous pouvons l'installer →
⚡ Réponse rapide

Text2Video-Zero est un framework de génération de vidéos zero-shot qui adapte les modèles Stable Diffusion pour la production vidéo. Il permet aux créateurs de vidéos et aux développeurs d'IA de générer des vidéos à partir de texte, de poses, de contours et de profondeurs sans entraîner de modèles vidéo spécialisés. Vous devez l'utiliser si vous souhaitez expérimenter la génération de vidéos open source et l'édition vidéo basée sur des instructions.

Fonctionne sur
Cross-platform
Hébergement
Cloud ou auto-hébergé
Langues
Python
Licence
Licence not stated in the repository

Qu'est-ce que c'est

L'outil génère des clips vidéo temporellement cohérents directement à partir de prompts textuels ou de guidages structurés tels que des squelettes de pose et des contours Canny. Il permet l'édition vidéo guidée par instruction via Video Instruct-Pix2Pix et s'intègre aux modèles DreamBooth personnalisés. Les intégrations avec Hugging Face Diffusers et Token Merging permettent l'exécution sur des GPU grand public avec seulement 7 GB VRAM.

Pour qui

Cet outil s'adresse aux chercheurs en IA, aux développeurs et aux monteurs vidéo techniques cherchant à adapter les pipelines Stable Diffusion pour la création vidéo. Il est idéal pour les équipes à l'aise avec l'exécution d'environnements Python et PyTorch sur du matériel GPU dédié. Il ne convient pas aux monteurs non techniques qui ont besoin d'une interface graphique prête à l'emploi.

Fonctionnalités clés

Zero-Shot Text to Video

Génère des séquences vidéo temporellement cohérentes à partir de prompts textuels en utilisant des modèles Stable Diffusion pré-entraînés.

Pose and Edge Control

Guide la génération de vidéos à l'aide de squelettes de mouvement, de la détection de contours Canny ou de cartes de profondeur MiDaS.

Instruction Based Video Editing

Édite des clips vidéo existants à l'aide de commandes textuelles via Video Instruct-Pix2Pix.

Custom Model Support

Charge des modèles de base Stable Diffusion arbitraires et des poids DreamBooth personnalisés depuis Hugging Face ou Civitai.

Comment démarrer

Opérationnel en 3 étapes

1
Clonez le dépôt et installez les prérequis dans un environnement Python 3.9 avec le support de CUDA 11.6.
2
Instanciez la classe Model en PyTorch en utilisant la précision float16 pour l'exécution sur GPU.
3
Exécutez des fonctions d'inférence telles que process_text2video ou process_pix2pix avec vos prompts cibles et vos chemins vidéo.
Franchement

Notre verdict honnête

Ses atouts

  • Ne nécessite aucun entraînement sur des ensembles de données vidéo pour générer des sorties de clips cohérentes.
  • Prend en charge plusieurs modes de guidage, notamment la pose, les contours, la profondeur et la personnalisation DreamBooth.
  • Intégré dans Hugging Face Diffusers pour un accès simplifié au pipeline.
  • Les optimisations telles que Token Merging permettent l'exécution sur des GPU disposant de moins de 7 GB VRAM.

Ses limites

  • Nécessite du matériel CUDA local ou des instances GPU cloud payantes pour effectuer l'inférence.
  • Le dépôt ne contient pas de mention explicite de licence open source dans ses métadonnées.
  • Les sorties vidéo par défaut sont de courtes séquences d'images qui nécessitent d'ajuster les étapes des hyperparamètres.
  • Nécessite une familiarité technique avec Python, les environnements virtuels et les configurations PyTorch.
Coût

Tarifs & licence

Le code est librement accessible sur GitHub, mais aucune licence logicielle explicite n'est spécifiée dans le dépôt. Le coût principal provient du matériel de calcul GPU requis pour exécuter l'inférence localement ou sur des serveurs cloud.

Travail rémunéré

Missions pour francophones

877 missions ouvertes à distance en entraînement d’IA, mises à jour le 16 novembre 2026 ; la plupart paient $20–$175 de l’heure. 8 d’entre elles demandent des francophones. Zekai les liste gratuitement ; la candidature se fait sur la plateforme de l’employeur.

Voir tous les postes ouverts →
Comparer

Alternatives

🎁 Alternatives libres & open source

Ces outils IA évalués font le même travail instantanément — depuis notre annuaire noté.

Pour aller plus loin

Utilisez-le, ou laissez-nous l'installer

📄 PDF gratuit : Text2Video-Zero pour Vidéo
Un guide simple pour obtenir votre premier résultat. Envoyé dans votre boîte mail.
🔔 64 personnes veulent un tutoriel vidéo complet — ajoutez votre vote
🛠 Pas envie de l'installer vous-même ?
Nous installons, hébergeons et configurons Text2Video-Zero pour vous — et formons votre équipe.
Confiez-nous l'installation ↗
Questions

FAQ

What hardware is required to run Text2Video-Zero locally?

Vous avez besoin d'un GPU compatible CUDA avec au moins 12 GB VRAM par défaut, ou moins de 7 GB VRAM lors de l'utilisation des optimisations Token Merging.

Can I use custom Stable Diffusion weights or fine-tuned models?

Oui, vous pouvez charger n'importe quel modèle de base Stable Diffusion ou des poids DreamBooth personnalisés convertis au format Diffusers.

How do I edit existing video footage with text prompts?

Vous pouvez utiliser la méthode Video Instruct-Pix2Pix en fournissant un fichier vidéo d'entrée ainsi que des instructions textuelles.

Radar

Dernières actus IA

✉️ La boîte à outils gratuite hebdo
Les meilleurs nouveaux outils libres & open source pour Vidéo — un court e-mail par semaine, dans votre langue.
Gratuit · 1 e-mail/semaine · désabonnement à tout moment
Soyez payé pour entraîner l’IA →

Voir Zekai en premier dans Google