Node.js ve TypeScript için web kazıma ve tarayıcı otomasyonu kütüphanesi.
Entegre proxy rotasyonu ve bot koruması atlama özellikleriyle sağlam tarayıcılar oluşturun.
Crawlee, JavaScript ve TypeScript için uçtan uca bir web kazıma ve tarayıcı otomasyonu kütüphanesidir. Modern bot korumalarını atlatırken yapay zeka, LLM ve RAG işlem hatları için temiz veriler çıkarmanıza yardımcı olur. Otomatik veri toplama iş akışları oluşturan profesyoneller bunu son derece yetenekli bulacaktır.
Kütüphane, hem ham HTTP taraması hem de Playwright veya Puppeteer kullanarak tam başsız (headless) tarayıcı otomasyonu için birleştirilmiş bir arayüz sağlar. Otomatik oturum yönetimi, proxy rotasyonu, parmak izi oluşturma ve kalıcı istek kuyrukları sunar. Çıkarılan verileri tablo veya dosya formatında diske veya bulut depolamaya kolayca kaydedebilirsiniz.
Bot tespitini atlaması gereken Node.js'te üretime hazır web kazıyıcıları oluşturan geliştiriciler ve veri mühendisleri için uygundur. Sıfırsız kod (zero-code) GUI aracı arayanlar veya ağırlıklı olarak JavaScript ve TypeScript ekosisteminin dışında çalışan ekipler için uygun değildir.
Aynı API'yi kullanarak HTTP istekleri ve başsız tarayıcı otomasyonu arasında sorunsuz geçiş yapın.
Hedef web siteleri tarafından engellenmekten kaçınmak için oturumları yönetin ve proxy'leri yerel olarak döndürün.
Modern bot korumalarını atlamak için otomatik olarak tarayıcı benzeri başlıklar ve TLS parmak izleri oluşturun.
Kazınmış tablo verilerini ve indirilen dosyaları yerel olarak depolayın veya bulut depolama arka uçlarını yapılandırın.
Crawlee, açık kaynak lisansı altında ücretsizdir. Tek maliyet, altyapınızda veya yerel makinenizde kendiniz çalıştırmanız ve entegre etmeyi seçtiğiniz isteğe bağlı proxy hizmetleridir.
873 açık uzaktan yapay zeka eğitimi işi, 15 Kasım 2026 tarihinde güncellendi; çoğu saatlik $20–$175 ödüyor. Bunların 2 tanesi Türkçe konuşanlar için. Zekai ücretsiz listeler; başvuru işverenin platformunda yapılır.
Birincil Node.js kütüphanesi JavaScript ve TypeScript'tir, ancak sürdürücüler ayrıca ayrı bir Python için Crawlee deposu da sağlar.
Hayır, kurulum boyutlarını daha küçük tutmak için Playwright veya Puppeteer gibi tarayıcı otomasyon kütüphanelerini ayrı olarak yüklemeniz gerekir.
Varsayılan olarak Crawlee, kazınmış veri setlerini, anahtar-değer çiftlerini ve istek kuyruklarını yerel olarak bir `./storage` dizininde saklar.
Google'da önce Zekai'yi gör