Ferramentas de IA avaliadas para o seu trabalho
Ganhe treinando IA
🤝 Você está na biblioteca Grátis & Open Source — ferramentas feitas pela comunidade que você pode usar sem pagar. Um conceito diferente do nosso diretório de IA avaliado.
Início › Grátis & Open Source › Escrita › PanFusion
✦ Grátis & open sourceEscrita

PanFusion

Implementação em PyTorch para geração de imagens panorâmicas de 360 graus a partir de texto usando Stable Diffusion.

Geração de Panorama em 360° a partir de Texto com Stable Diffusion

Destaque da CVPR 2024 implementando PanFusion para criação e avaliação de panoramas imersivos.

Grátis para sempre · open source · MIT
✓ Needs IT✓ No navegador✓ Colaboração em tempo real
5.4
ZEKAI
IA avançada para panoramas em 360°
Grátis & open source · Escrita
Facilidade de configuração3
Utilidade8
Manutenção5.5
Comunidade5
★ 273
GITHUB
Dec 2025
ATUALIZADO
MIT
LICENÇA
🛠 Não quer hospedar você mesmo? Nós configuramos para você →
⚡ Resposta rápida

PanFusion é um framework baseado em PyTorch que adapta o Stable Diffusion para a geração de imagens panorâmicas em 360 graus a partir de texto. É ideal para pesquisadores e desenvolvedores que trabalham com IA generativa, ambientes 3D e imagens espaciais.

Funciona em
Cross-platform
Hospedagem
Self-host
Idiomas
Python
Licença
MIT

O que é

A ferramenta fornece código completo de pré-processamento de dados, treinamento, teste e avaliação para gerar panoramas de 360 graus a partir de prompts de texto. Inclui módulos para unir imagens de skybox do Matterport3D, legendagem com BLIP, renderização de layouts e treinamento de modelos de avaliação como FAED e HorizonNet.

Para quem

É adequado para pesquisadores de aprendizado de máquina e engenheiros de visão computacional com acesso a hardware com múltiplas GPUs, como NVIDIA A100s. Não é adequado para usuários casuais ou aqueles sem infraestrutura de deep learning e experiência em Python.

Recursos principais

Panorama com Stable Diffusion

Adapta modelos de difusão para gerar imagens panorâmicas equirretangulares de 360 graus.

Geração Condicionada por Layout

Ajusta finamente um modelo ControlNet para síntese de panoramas condicionada por layout.

Integração de Log com Wandb

Usa Weights & Biases para registrar, visualizar e identificar problemas de treinamento.

FAED e HorizonNet

Inclui código de treinamento para modelos de avaliação para medir a qualidade do panorama e do layout.

Como começar

Pronto em 3 passos

1
Clone o repositório e crie o ambiente usando conda env create -f environment.yaml
2
Baixe os checkpoints pré-treinados e coloque-os nas pastas designadas de logs ou weights
3
Execute os scripts de predição usando main.py com os argumentos apropriados de dados e modelo
Falando sério

Nosso veredito honesto

Pontos fortes

  • Pipeline completo cobrindo pré-processamento, treinamento, teste e avaliação
  • Suporta tanto geração de texto para imagem quanto criação de panoramas condicionada por layout
  • Fornece checkpoints pré-treinados para testes rápidos e inferência
  • Inclui scripts para unir imagens de skybox do Matterport3D e gerar legendas

Onde deixa a desejar

  • Requer hardware de ponta, especificamente múltiplas GPUs NVIDIA A100 para treinamento
  • Configuração complexa envolvendo Anaconda, datasets personalizados e ferramentas externas de pré-processamento em Matlab
  • Forte dependência de downloads de datasets externos como Matterport3D e arquivos tar específicos
Custo

Preços & licença

Gratuito sob sua licença MIT, sem opções de nuvem hospedada mencionadas no README. O único custo é a execução do hardware necessário para o treinamento e a inferência.

Trabalho remunerado

Vagas para quem fala português

879 vagas remotas abertas de treinamento de IA, atualizadas em 15 de novembro de 2026; a maioria paga $20–$175 por hora. 8 delas pedem falantes de português. O Zekai lista de graça; a candidatura vai para a plataforma do empregador.

Ver todas as vagas abertas →
Comparar

Alternativas

🎁 Alternativas grátis & open source
Saiba mais

Use, ou deixe que a gente configure

📄 PDF grátis: PanFusion para Escrita
Um guia em linguagem simples para o seu primeiro resultado. Enviado ao seu e-mail.
🔔 64 pessoas querem um tutorial em vídeo completo — adicione seu voto
🛠 Não quer configurar você mesmo?
Nós instalamos, hospedamos e configuramos o PanFusion para você — e treinamos sua equipe.
Deixe com a gente ↗
Perguntas

FAQ

Qual hardware é necessário para treinar o PanFusion?

O treinamento do modelo de geração de texto para imagem requer 4x GPUs NVIDIA A100, enquanto modelos de avaliação como FAED ou HorizonNet podem rodar em uma única NVIDIA A100.

Quais datasets são suportados para treinamento?

O framework usa principalmente o dataset de skybox Matterport3D e o dataset Matterport3DLayoutAnnotation.

Como avalio os panoramas gerados?

Você pode treinar e usar o modelo FAED incluído ou checkpoints do HorizonNet para avaliar a qualidade da imagem e do layout.

Radar

Últimas notícias de IA

✉️ O kit gratuito semanal
As melhores novas ferramentas grátis & open source para Escrita — um e-mail curto por semana, no seu idioma.
Grátis · 1 e-mail/semana · cancele quando quiser
Ganhe dinheiro treinando IA →

Veja o Zekai primeiro no Google