Des outils IA notés pour votre métier
Missions IA payées
🤝 Vous êtes dans la bibliothèque Libre & Open Source — des outils communautaires utilisables sans payer. Un concept différent de notre annuaire IA noté.
Accueil › Libre & Open Source › Écriture › PanFusion
✦ Libre & open sourceÉcriture

PanFusion

Implémentation PyTorch pour la génération d'images panoramiques à 360 degrés à partir de texte en utilisant Stable Diffusion.

Génération de panoramas à 360° à partir de texte avec Stable Diffusion

Point fort de CVPR 2024 implémentant PanFusion pour la création et l'évaluation de panoramas immersifs.

Gratuit pour toujours · open source · MIT
✓ Needs IT✓ Dans le navigateur✓ Collaboration en temps réel
5.4
ZEKAI
IA avancée pour panoramas à 360°
Libre & open source · Écriture
Facilité d'installation3
Utilité8
Maintenance5.5
Communauté5
★ 273
GITHUB
Dec 2025
MIS À JOUR
MIT
LICENCE
🛠 Pas envie de l'héberger vous-même ? Nous pouvons l'installer →
⚡ Réponse rapide

PanFusion est un framework basé sur PyTorch qui adapte Stable Diffusion pour la génération d'images panoramiques à 360 degrés à partir de texte. Il convient aux chercheurs et développeurs travaillant sur l'IA générative, les environnements 3D et l'imagerie spatiale.

Fonctionne sur
Cross-platform
Hébergement
Self-host
Langues
Python
Licence
MIT

Qu'est-ce que c'est

L'outil fournit un code complet de prétraitement des données, d'entraînement, de test et d'évaluation pour générer des panoramas à 360 degrés à partir de descriptions textuelles. Il comprend des modules pour assembler des images skybox Matterport3D, générer des légendes avec BLIP, rendre des dispositions et entraîner des modèles d'évaluation comme FAED et HorizonNet.

Pour qui

Il s'adresse aux chercheurs en apprentissage automatique et aux ingénieurs en vision par ordinateur ayant accès à du matériel multi-GPU comme des NVIDIA A100. Il ne convient pas aux utilisateurs occasionnels ou à ceux qui ne disposent pas d'une infrastructure de deep learning et d'une expérience en Python.

Fonctionnalités clés

Panorama Stable Diffusion

Adapte les modèles de diffusion pour générer des images panoramiques équirectangulaires à 360 degrés.

Génération conditionnée par la disposition

Affine un modèle ControlNet pour la synthèse de panoramas conditionnée par la disposition.

Intégration des journaux Wandb

Utilise Weights & Biases pour l'enregistrement, la visualisation et l'identification des problèmes d'entraînement.

FAED et HorizonNet

Comprend le code d'entraînement pour les modèles d'évaluation afin de mesurer la qualité des panoramas et des dispositions.

Comment démarrer

Opérationnel en 3 étapes

1
Cloner le référentiel et créer l'environnement à l'aide de conda env create -f environment.yaml
2
Télécharger les points de contrôle pré-entraînés et les placer dans les dossiers de journaux ou de poids désignés
3
Exécuter les scripts de prédiction à l'aide de main.py avec les arguments de données et de modèle appropriés
Franchement

Notre verdict honnête

Ses atouts

  • Pipeline complet couvrant le prétraitement, l'entraînement, le test et l'évaluation
  • Prend en charge à la fois la génération texte-image et la création de panoramas conditionnés par la disposition
  • Fournit des points de contrôle pré-entraînés pour des tests et une inférence rapides
  • Comprend des scripts pour assembler des images skybox Matterport3D et générer des légendes

Ses limites

  • Nécessite du matériel haut de gamme, en particulier plusieurs GPU NVIDIA A100 pour l'entraînement
  • Installation complexe impliquant Anaconda, des jeux de données personnalisés et des outils de prétraitement externes Matlab
  • Forte dépendance au téléchargement de jeux de données externes comme Matterport3D et d'archives tar spécifiques
Coût

Tarifs & licence

Gratuit sous licence MIT, sans option de cloud hébergé mentionnée dans le README. Le seul coût est l'exécution du matériel requis pour l'entraînement et l'inférence.

Travail rémunéré

Missions pour francophones

877 missions ouvertes à distance en entraînement d’IA, mises à jour le 16 novembre 2026 ; la plupart paient $20–$175 de l’heure. 8 d’entre elles demandent des francophones. Zekai les liste gratuitement ; la candidature se fait sur la plateforme de l’employeur.

Voir tous les postes ouverts →
Comparer

Alternatives

🎁 Alternatives libres & open source
Pour aller plus loin

Utilisez-le, ou laissez-nous l'installer

📄 PDF gratuit : PanFusion pour Écriture
Un guide simple pour obtenir votre premier résultat. Envoyé dans votre boîte mail.
🔔 64 personnes veulent un tutoriel vidéo complet — ajoutez votre vote
🛠 Pas envie de l'installer vous-même ?
Nous installons, hébergeons et configurons PanFusion pour vous — et formons votre équipe.
Confiez-nous l'installation ↗
Questions

FAQ

Quel matériel est requis pour entraîner PanFusion ?

L'entraînement du modèle de génération texte-image nécessite 4x GPU NVIDIA A100, tandis que les modèles d'évaluation comme FAED ou HorizonNet peuvent s'exécuter sur un seul NVIDIA A100.

Quels jeux de données sont pris en charge pour l'entraînement ?

Le framework utilise principalement le jeu de données skybox Matterport3D et le jeu de données Matterport3DLayoutAnnotation.

Comment évaluer les panoramas générés ?

Vous pouvez entraîner et utiliser le modèle FAED inclus ou les points de contrôle d'HorizonNet pour évaluer la qualité de l'image et de la disposition.

Radar

Dernières actus IA

✉️ La boîte à outils gratuite hebdo
Les meilleurs nouveaux outils libres & open source pour Écriture — un court e-mail par semaine, dans votre langue.
Gratuit · 1 e-mail/semaine · désabonnement à tout moment
Soyez payé pour entraîner l’IA →

Voir Zekai en premier dans Google