클로드 코드를 위한 정중한 웹 수집 프롬프트
Wikiprompt, 무료 프롬프트 백과사전에서
2026년 10월 5일
클로드 코드를 위한 정중한 웹 수집 프롬프트 존중하는 웹 하베스터를 생성하기 위한 프롬프트로, robots.txt 준수, 속도 제한, 중복 제거를 통해 차단을 피하며, 7단계 파이프라인을 포함합니다.
프롬프트 내용저장
🌐
Python으로 예의 바른 웹 하베스터를 구축하세요: 시드, 가져오기, 렌더링, 정리, 추출, 중복 제거, 내보내기. robots.txt를 존중하고, 각 호스트에 대해 속도 제한을 적용하며, 429 응답 시 Retry-After를 준수하세요. JS 페이지에만 Playwright를 사용하세요. 모든 레코드를 검증하고 콘텐츠 해시로 중복 항목을 제거하세요. 출력: dataset.jsonl. 코드를 작성하기 전에 계획을 먼저 보여주세요.
전체 프롬프트를 보려면 로그인하세요
Continue with:
By logging in, you agree to our Terms of Use and Privacy Policy
사용법
이 프롬프트는 coding와 함께 사용하도록 설계되었습니다. 위의 프롬프트 내용을 복사하여 원하는 AI 도구에 붙여넣으세요.
최상의 결과를 얻으려면 자리 표시자(대괄호 또는 대문자로 표시)를 특정 요구 사항으로 사용자 지정할 수 있습니다.
토론
댓글 0개