आपके काम के लिए रेटेड एआई टूल
AI ट्रेन करके कमाएँ
🤝 आप फ्री & ओपन सोर्स लाइब्रेरी में हैं — समुदाय द्वारा बनाए गए टूल जिन्हें आप बिना भुगतान किए उपयोग कर सकते हैं। हमारी स्कोर की गई AI डायरेक्टरी से अलग एक अवधारणा।
होम › फ्री & ओपन सोर्स › सेवाएं › crawlee
✦ फ्री & ओपन सोर्ससेवाएं

crawlee

Node.js और TypeScript के लिए वेब स्क्रैपिंग और ब्राउज़र ऑटोमेशन लाइब्रेरी।

विश्वसनीय वेब स्क्रैपिंग और ब्राउज़र ऑटोमेशन

एकीकृत प्रॉक्सी रोटेशन और एंटी-बॉट इवेजन के साथ मजबूत क्रॉलर बनाएं।

हमेशा के लिए मुफ़्त · ओपन सोर्स · Apache-2.0
✓ Light setup✓ ब्राउज़र-आधारित✓ रियल-टाइम सहयोग
7.9
ZEKAI
आवश्यक Node.js स्क्रैपर
फ्री & ओपन सोर्स · सेवाएं
सेटअप की आसानी4
उपयोगिता9
रखरखाव9.5
समुदाय9.2
★ 26,090
गिटहब
Oct 2026
अपडेटेड
Apache-2.0
लाइसेंस
🛠 खुद होस्ट नहीं करना चाहते? हम इसे सेट कर सकते हैं →
⚡ त्वरित उत्तर

Crawlee JavaScript और TypeScript के लिए एक एंड-टू-एंड वेब स्क्रैपिंग और ब्राउज़र ऑटोमेशन लाइब्रेरी है। यह आधुनिक बॉट सुरक्षा को दरकिनार करते हुए AI, LLM और RAG पाइपलाइनों के लिए साफ डेटा निकालने में आपकी मदद करती है। स्वचालित डेटा संग्रह वर्कफ़्लो बनाने वाले पेशेवरों को यह बेहद सक्षम लगेगी।

इस पर चलता है
Cross-platform
होस्टिंग
Self-host
भाषाएँ
TypeScript
लाइसेंस
Apache-2.0

यह क्या है

यह लाइब्रेरी Playwright या Puppeteer का उपयोग करके कच्चे HTTP क्रॉलिंग और पूर्ण हेडलेस ब्राउज़र ऑटोमेशन दोनों के लिए एक एकीकृत इंटरफ़ेस प्रदान करती है। इसमें स्वचालित सत्र प्रबंधन, प्रॉक्सी रोटेशन, फ़िंगरप्रिंट जनरेशन और लगातार अनुरोध कतारें (request queues) शामिल हैं। आप निकाले गए डेटा को आसानी से डिस्क या क्लाउड स्टोरेज पर सारणीबद्ध (tabular) या फ़ाइल प्रारूपों में सहेज सकते हैं।

किसके लिए

यह उन डेवलपर्स और डेटा इंजीनियरों के लिए उपयुक्त है जो Node.js में प्रोडक्शन-ग्रेड वेब स्क्रैपर बना रहे हैं जिन्हें बॉट डिटेक्शन को बायपास करने की आवश्यकता है। यह उन टीमों के लिए उपयुक्त नहीं है जो ज़ीरो-कोड GUI टूल की तलाश में हैं या जो मुख्य रूप से JavaScript और TypeScript इकोसिस्टम के बाहर काम कर रहे हैं।

मुख्य विशेषताएँ

एकीकृत क्रॉलिंग इंटरफ़ेस

एक ही API का उपयोग करके HTTP अनुरोधों और हेडलेस ब्राउज़र ऑटोमेशन के बीच सहजता से स्विच करें।

स्वचालित प्रॉक्सी रोटेशन

लक्षित वेबसाइटों द्वारा ब्लॉक होने से बचने के लिए मूल रूप से सत्र प्रबंधित करें और प्रॉक्सी को घुमाएं (rotate करें)।

मानव जैसी फ़िंगरप्रिंट्स

आधुनिक बॉट सुरक्षा को बायपास करने के लिए स्वचालित रूप से ब्राउज़र जैसी हेडर और TLS फ़िंगरप्रिंट जनरेट करें।

प्लगेबल स्टोरेज

स्क्रैप किए गए सारणीबद्ध डेटा और डाउनलोड की गई फ़ाइलों को स्थानीय रूप से स्टोर करें या क्लाउड स्टोरेज बैकएंड को कॉन्फ़िगर करें।

कैसे शुरू करें

3 चरणों में तैयार

1
बॉयलरप्लेट कोड के साथ एक नया प्रोजेक्ट जनरेट करने के लिए CLI के माध्यम से `npx crawlee create my-crawler` चलाएं।
2
यदि आप ब्राउज़र-आधारित क्रॉलिंग का उपयोग कर रहे हैं तो Playwright जैसी आवश्यक निर्भरताएं (dependencies) इंस्टॉल करें।
3
अनुरोध हैंडलर के भीतर अपना कस्टम क्रॉलिंग तर्क लागू करें और स्क्रैपर शुरू करें।
सच कहें तो

हमारा ईमानदार फैसला

क्या अच्छा है

  • तेज़ HTTP स्क्रैपिंग के लिए Cheerio/JSDOM और पूर्ण ब्राउज़र रेंडरिंग के लिए Playwright/Puppeteer दोनों का समर्थन करता है।
  • अंतर्निहित स्वचालित प्रॉक्सी रोटेशन और सत्र प्रबंधन दर सीमाओं (rate limits) को सहजता से संभालते हैं।
  • सख्त बॉट डिटेक्शन से बचने के लिए बॉक्स से बाहर मानव जैसी ब्राउज़र फ़िंगरप्रिंट जेनरेट करता है।
  • टाइप-सुरक्षित डेटा निष्कर्षण के लिए मजबूत जेनेरिक के साथ पूरी तरह से TypeScript में लिखा गया है।

कहाँ कमी है

  • ठीक से चलने के लिए Node.js 22.13 या उससे ऊपर की आवश्यकता है।
  • Playwright या Puppeteer के माध्यम से भारी ब्राउज़र ऑटोमेशन के लिए पैमाने पर महत्वपूर्ण RAM और CPU संसाधनों की आवश्यकता होती है।
  • आपको अपना खुद का JavaScript या TypeScript निष्कर्षण (extraction) तर्क लिखना और बनाए रखना होगा।
लागत

मूल्य & लाइसेंस

Crawlee अपने ओपन सोर्स लाइसेंस के तहत मुफ़्त है। एकमात्र लागत इसे अपने बुनियादी ढांचा (infrastructure) या स्थानीय मशीन पर स्वयं चलाना है, साथ ही कोई भी वैकल्पिक प्रॉक्सी सेवा जिसे आप एकीकृत करना चुनते हैं।

पेड वर्क

हिंदी बोलने वालों के लिए जॉब्स

877 खुले रिमोट AI-ट्रेनिंग रोल, 16 नवंबर 2026 को अपडेट; ज़्यादातर में $20–$175 प्रति घंटा। इनमें से 5 हिंदी बोलने वालों के लिए हैं। Zekai इन्हें मुफ़्त में लिस्ट करता है; आवेदन एम्प्लॉयर के प्लेटफ़ॉर्म पर जाता है।

सभी खुले रोल देखें →
तुलना

विकल्प

🎁 फ्री & ओपन-सोर्स विकल्प

ये समीक्षित AI टूल यही काम तुरंत करते हैं — हमारी स्कोर की गई डायरेक्टरी से।

और पाएं

इसे उपयोग करें, या हमसे सेट करवाएं

📄 मुफ़्त PDF: सेवाएं के लिए crawlee
आपका पहला परिणाम पाने के लिए सरल भाषा में गाइड। आपके इनबॉक्स में।
🔔 64 लोग पूरा वीडियो ट्यूटोरियल चाहते हैं — अपना वोट जोड़ें
🛠 खुद सेट नहीं करना चाहते?
हम crawlee को आपके लिए इंस्टॉल, होस्ट और कॉन्फ़िगर करेंगे — और आपकी टीम को प्रशिक्षित करेंगे।
हमसे करवाएं ↗
प्रश्न

सामान्य प्रश्न

क्या मैं Python के साथ Crawlee का उपयोग कर सकता हूँ?

प्राथमिक Node.js लाइब्रेरी JavaScript और TypeScript है, लेकिन मेंटेनर Python रिपॉजिटरी के लिए एक अलग Crawlee भी प्रदान करते हैं।

क्या Crawlee ब्राउज़र पहले से इंस्टॉल होकर आता है?

नहीं, इंस्टॉलेशन के आकार को छोटा रखने के लिए आपको Playwright या Puppeteer जैसी ब्राउज़र ऑटोमेशन लाइब्रेरी अलग से इंस्टॉल करनी होंगी।

Crawlee डिफ़ॉल्ट रूप से डेटा स्टोरेज को कैसे संभालता है?

डिफ़ॉल्ट रूप से, Crawlee `./storage` निर्देशिका में स्थानीय रूप से स्क्रैप किए गए डेटासेट, की-वैल्यू जोड़े और अनुरोध कतारों (request queues) को स्टोर करता है।

रडार

ताज़ा AI समाचार

✉️ साप्ताहिक मुफ़्त टूलकिट
सेवाएं के लिए सर्वश्रेष्ठ नए फ्री & ओपन-सोर्स टूल — हर हफ्ते एक छोटा ईमेल, आपकी भाषा में।
मुफ़्त · 1 ईमेल/सप्ताह · कभी भी अनसब्सक्राइब करें
AI ट्रेनिंग से पैसे कमाएँ →

Google में Zekai को सबसे पहले देखें