pathway
Akış işleme, gerçek zamanlı analitik ve RAG için Python ETL çatısı.
Gerçek zamanlı analitik, LLM boru hatları ve RAG için Python ETL çatısı.
Pathway, akış işleme ve gerçek zamanlı analitik için ölçeklenebilir bir Rust motoruyla güçlendirilmiş bir Python ETL çatısıdır. Python kullanarak canlı LLM uygulamaları ve RAG boru hatları geliştiren profesyoneller için uygundur.
Nedir
Differential Dataflow Rust motorunu kullanarak toplu (batch) ve akış verileri üzerinde Python veri boru hatları çalıştırır. Kafka, PostgreSQL ve GDrive bağlayıcılarının yanı sıra gerçek zamanlı Vektör İndeksleri için özelleşmiş LLM yardımcıları içerir.
Kimler için
Rust performansını korurken Python ile kodlama yapmak isteyen, canlı veri akışları ve RAG sistemleri kuran geliştiriciler için uygundur. Kodsuz (zero-code) arayüzlü boru hattı oluşturucuları arayan ekipler için uygun değildir.
Temel özellikler
Ölçeklenebilir Rust Motoru
Çoklu iş parçacığı ve dağıtık hesaplamalar için Python kodunu Differential Dataflow Rust motoru üzerinden çalıştırır.
Birleştirilmiş Toplu ve Akış
Toplu işleri, akış yeniden oynatmalarını ve veri akışlarını tamamen aynı kod tabanını kullanarak işler.
LLM ve RAG Araçları
Canlı belge RAG'i için sarmalayıcılar, ayrıştırıcılar, gömüştürücüler ve bellek içi gerçek zamanlı Vektör İndeksi sağlar.
Kapsamlı Bağlayıcılar
Kafka, GDrive, PostgreSQL, SharePoint ve Airbyte aracılığıyla 300'den fazla veri kaynağına bağlanır.
3 adımda hazır
Dürüst kararımız
Artıları
- Aynı kod tabanı hem yerel geliştirmeyi, toplu işleri hem de gerçek zamanlı akışları yönetir
- Yerleşik LLM eklentisi gömüştürücüler, ayırıcılar ve gerçek zamanlı vektör indeksleri içerir
- Otomatik tutarlılık güncellemeleriyle sıra dışı ve gecikmiş veri noktalarını işler
- 300'den fazla harici veri kaynağına bağlanmak için Airbyte entegrasyonunu destekler
Eksileri
- Yerel olarak yalnızca MacOS ve Linux'ta kullanılabilir, diğer işletim sistemleri için Sanal Makine gerektirir
- Ücretsiz sürüm 'en az bir kez' tutarlılık sağlarken, 'tam olarak bir kez' için kurumsal sürüm gerekir
- Python ortamlarını, bağımlılıkları ve konteyner dağıtımını ayarlamak için teknik beceri gerektirir
Fiyatlar & lisans
Deponun meta verilerinde bir lisans adı belirtilmemiştir ve README dosyası, farklı tutarlılık garantilerine sahip ücretsiz ve kurumsal sürümlerden bahsetmektedir.
Türkçe konuşanlar için işler
880 açık uzaktan yapay zeka eğitimi işi, 15 Kasım 2026 tarihinde güncellendi; çoğu saatlik $20–$175 ödüyor. Bunların 2 tanesi Türkçe konuşanlar için. Zekai ücretsiz listeler; başvuru işverenin platformunda yapılır.
Alternatifler
Kullanın ya da biz kuralım
SSS
Hangi işletim sistemleri desteklenmektedir?
Pathway resmi olarak MacOS ve Linux üzerinde kullanılabilmektedir. Diğer sistemleri kullananlar bunu bir Sanal Makine içinde çalıştırmalıdır.
Hem toplu işlem hem de akış desteği var mı?
Evet, çatı; aynı kodun toplu işleri, akış yeniden oynatmalarını ve gerçek zamanlı akışları yönetmesini sağlayan birleştirilmiş bir motor kullanır.
Harici kaynaklara nasıl bağlanır?
Kafka, GDrive, PostgreSQL ve SharePoint için yerleşik bağlayıcıların yanı sıra 300'den fazla ek kaynak için bir Airbyte bağlayıcısı içerir.
