विनम्र वेब हार्वेस्टर प्रॉम्प्ट क्लॉड कोड के लिए
Wikiprompt से, मुफ्त प्रॉम्प्ट विश्वकोश
5 अक्टू॰ 2026
विनम्र वेब हार्वेस्टर प्रॉम्प्ट क्लॉड कोड के लिए एक सम्मानजनक वेब हार्वेस्टर उत्पन्न करने के लिए प्रॉम्प्ट जो robots.txt का पालन करके, रेट लिमिटिंग और डिडुप्लिकेशन के माध्यम से प्रतिबंधों से बचता है, जिसमें 7-चरणीय पाइपलाइन शामिल है।
प्रॉम्प्ट सामग्रीसहेजें
🌐
Python में एक विनम्र वेब हार्वेस्टर बनाएं: seed, fetch, render, clean, extract, dedupe, export। robots.txt का सम्मान करें, हर होस्ट के लिए rate-limit करें, 429 पर Retry-After का पालन करें। Playwright का उपयोग केवल JS पेजों के लिए करें। हर रिकॉर्ड को मान्य करें और content hash से डुप्लिकेट हटाएं। आउटपुट: dataset.jsonl। कोड लिखने से पहले मुझे योजना दिखाएं।
पूरा प्रॉम्प्ट देखने के लिए साइन इन करें
Continue with:
By logging in, you agree to our Terms of Use and Privacy Policy
उपयोग
यह प्रॉम्प्ट coding के साथ उपयोग के लिए डिज़ाइन किया गया है। ऊपर प्रॉम्प्ट सामग्री कॉपी करें और अपने पसंदीदा AI टूल में पेस्ट करें।
सर्वोत्तम परिणामों के लिए, आप अपनी विशिष्ट आवश्यकताओं के अनुसार प्लेसहोल्डर (वर्ग कोष्ठक या बड़े अक्षरों में दर्शाए गए) को अनुकूलित कर सकते हैं।
चर्चा
0 टिप्पणियाँ