Stable Diffusion kullanarak metinden 360 derece panoramik görsel oluşturma için PyTorch uygulaması.
Sürükleyici panorama oluşturma ve değerlendirme için PanFusion'ı uygulayan CVPR 2024 öne çıkan çalışması.
PanFusion, Stable Diffusion'ı metinden 360 derece panoramik görsel oluşturma için evcilleştiren PyTorch tabanlı bir altyapıdır. Üretken yapay zeka, 3D ortamlar ve uzamsal görüntüleme üzerine çalışan araştırmacılar ve geliştiriciler için uygundur.
Araç, metin istemlerinden 360 derece panoromalar oluşturmak için eksiksiz veri ön işleme, eğitim, test ve değerlendirme kodu sağlar. Matterport3D gökyüzü kutusu görsellerini birleştirme, BLIP ile açıklama ekleme, düzenleri işleme ve FAED ve HorizonNet gibi eğitim değerlendirme modellerini içeren modüller sunar.
NVIDIA A100 gibi çoklu GPU donanımına erişimi olan makine öğrenimi araştırmacıları ve bilgisayarla görü mühendisleri için uygundur. Sıradan kullanıcılar veya derin öğrenme altyapısı ve Python deneyimi olmayanlar için uygun değildir.
360 derece equirectangular panoramik görseller oluşturmak için difüzyon modellerini evcilleştirir.
Düzen koşullu panorama sentezi için bir ControlNet modelini hassas ayardan geçirir.
Eğitim sorunlarını günlüğe kaydetmek, görselleştirmek ve belirlemek için Weights & Biases kullanır.
Panorama ve düzen kalitesini ölçmek için değerlendirme modellerine ait eğitim kodu içerir.
MIT lisansı altında ücretsiz olup, README'de barındırılan herhangi bir bulut seçeneği belirtilmemiştir. Tek maliyet, eğitim ve çıkarım için gereken donanımı çalıştırmaktır.
879 açık uzaktan yapay zeka eğitimi işi, 15 Kasım 2026 tarihinde güncellendi; çoğu saatlik $20–$175 ödüyor. Bunların 2 tanesi Türkçe konuşanlar için. Zekai ücretsiz listeler; başvuru işverenin platformunda yapılır.
Metinden görsele üretim modelini eğitmek 4x NVIDIA A100 GPU gerektirirken, FAED veya HorizonNet gibi değerlendirme modelleri tek bir NVIDIA A100 üzerinde çalışabilir.
Altyapı öncelikle Matterport3D gökyüzü kutusu veri setini ve Matterport3DLayoutAnnotation veri setini kullanır.
Görsel ve düzen kalitesini değerlendirmek için dahil edilen FAED modelini veya HorizonNet kontrol noktalarını eğitebilir ve kullanabilirsiniz.
Google'da önce Zekai'yi gör