다른 IP 주소를 치료 스파이더에 바인딩

Question

다른 공개 IP 주소를 치료 스파이더에 바인딩하려면 어떻게해야합니까? 또한 각 소스 IP에 대한 속도 제한을 설정할 수도 있습니다 (예 : CONCURRENT_REQUESTS_PER_SOURCE_IP).

치료 문서에서 CONCURRENT_REQUESTS_PER_DOMAIN 및 CONCURRENT_REQUESTS_PER_IP는 모두 대상 도메인과 대상 IP에서 작동하는 것으로 보입니다.

Answer 1

가능하지만, 조금만 Scrapy 코어를 변경해야합니다. 다른 사람이 이전에 변경 제안을 한 적이 있지만 현재 소스의 모양으로 변경 한 적이 없습니다.

the information in this change proposal으로 2 분 내에 직접 패치 할 수 있습니다.

변경 제안서가 1.5 년이 넘었지만 해당 제안서의 현재 편집 된 파일 소스는 여전히 비슷합니다.