scraperwiki : 왜 내 스크레이퍼는 1 개의 URL을 사용하지만 다른 하나는 사용하지 않습니까?

Question

이것은 내 첫 스크레이퍼입니다. https://scraperwiki.com/scrapers/my_first_scraper_1/

나는이 페이지가 아닌 google.com을 다룰 수있었습니다.

http://subeta.net/pet_extra.php?act=read&petid=1014561

어떤 이유 왜?

여기에서 문서를 읽었습니다.

https://scraperwiki.com/docs/php/php_intro_tutorial/

그리고 코드가 작동하지 말아야 이유는 없다.

Answer 1

특정 요소를 찾는 것처럼 보입니다. 요소는 사용자가 고칠 사이트에 따라 변경됩니다. 그래서 당신이 찾고있는 요소를 찾지 못하면 당신은 돌아 오지 않습니다. 또한 컬을 사용하여 스크래핑/스파이더 링 도구를 만드는 방법을 살펴 보았습니다. 뿐만 아니라 당신은 많은 것을 배울 것이나 당신은 위치를 긁는 방법에 관하여 많게 찾아 낼 것이다.

또한 귀하가 근근이 살아가는 웹 사이트의 robots.txt 파일을 준수하거나 무례한 것으로 간주되기 때문에 근근이 살아 가기 전에 허락을 구하는 것이 좋습니다.