0
나는이 질문의 버전을 묻는 질문을하고 며칠 전 여러 가지 전략을 시도했다.차단되지 않고 Google 검색에서 Python을 사용하여 모든 URL 결과를 긁을 수 있습니까?
내가 원하는 것은 Python을 사용하여 큰 스크립트 (주로 뉴스 사이트)의 텍스트 분석을 수행하는 별도의 스크립트에서 사용할 수있는 Google 검색의 모든 URL을 다듬는 것입니다. 이것은 비교적 간단하지만, 시도한 시도 중 어느 것도 제대로 작동하지 않았습니다. 내가 가진으로
이 가까운 거리 : 나는 쫓겨 도착하기 전에
from google import search
for url in search('site:cbc.ca "kinder morgan" and "trans mountain" and protest*', stop=100):
print(url)
이 약 300 URL을 반환. 이 매개 변수를 사용하는 실제 검색은 약 1000 개의 결과를 제공하며 나는 이들 모두를 원합니다.
우선 : 가능합니까? 둘째 : 누구든지이 작업을 수행 할 제안이 있습니까? 기본적으로 다른 스크립트에서 사용할 수있는 모든 URL의 txt 파일 만 필요합니다.