scrape

0열

1답변

Excel VBA를 사용하여 인터넷 익스플로러를 자동화하여 웹 사이트에서 축구 결과를 추출하고 드롭 다운 값을 변경할 때 데이터를 업데이트하는 데 어려움을 겪고 있습니다. 웹 사이트는 다음과 같습니다 나는 '단계'드롭 다운의 값을 변경하고 경기 결과를 긁어 찾고 http://www.whoscored.com/Regions/250/Tournaments/30/S

0열

1답변

Python에서 XPath를 사용하여 노드를 계산하는 가장 효율적인 방법

Python에서 XPath를 사용하여 노드를 계산하려면 어떻게해야합니까? this webpage이 코드를 사용하여 예를 들어 :는 from lxml import html, etree import requests url = "http://intelligencesquaredus.org/debates/past-debates/item/587-islam-is-d

2열

1답변

로봇이 무시하도록 설정되어 있음에도 불구하고 robot.txt를 반환합니다.

코드를 추출하려고 시도했을 때 ROBOTS 메타 태그가 반환되고 Mechanize를 사용하려고 시도 할 때도 계속해서이를 수행하는 웹 사이트가 있습니다. 예를 들면 다음과 같습니다. 헤더 설정 및 다른 핸들 설정을 시도했지만 ROBOTS 메타 태그가 아닌 응답을받지 못했습니다. 도움을 주시면 감사하겠습니다. 편집 : 아래에 제안 된 헤더를 시도하는 impo

-1열

1답변

R 데이터 긁힘 웹 응용 프로그램의 반짝이는 오류 "교체 할 항목 수가 대체 길이의 배수가 아닙니다."

NOAA 웹 사이트에서 데이터를 긁어내어 발견 한 기능을 사용하여 반짝이는 웹 응용 프로그램을 만들려고합니다. 그래서 함수를 만들지는 않았지만 그것을 사용하고 잘 작동합니다. R에서 기꺼이/사용하지 않는 직장에서 다른 사람들을 위해 앱을 만들어 앱에서 데이터를 다운로드 할 수있게하려고합니다. 나는 간단한 앱을 만들었으며 이것도 간단 할 것이라고 생각했지만

7열

2답변

Facebook Object Debugger - 유효한 IP 주소로 호스트 이름을 확인할 수 없습니다.

Facebook에서 내 페이지에서 메타 데이터를 긁는 방법에 문제가 있습니다. 나는 다음과 같은 오류 얻을 페이스 북 객체 디버거를 사용할 때 는 : 을 나는 이것이 내 DNS 레코드를 정의하는 방법을 함께 할 수있는 뭔가가 꽤 확신합니다. 긁는 도구가 내 사이트에 도착조차 못하는 것 같습니다. 오류가 나타나면 호스트 이름을 유효한 IP로 바꿀 수 없습니다

1열

1답변

www.trivago.ie의 li 요소에서 클릭 이벤트 발생

www.trivago.ie 사이트를 긁어내는 일부 팬텀 코드를 작성하고 있습니다. 먼저해야 할 일은 페이지의 통화를 변경하는 것입니다. 나는 자바 스크립트 또는 Jquery와 함께 성공하지 못하도록 노력했다. 브라우저에서 개발자 콘솔을 사용하여 테스트하고 있습니다. 코드에 따르면 li 요소를 클릭하기 만하면 실제로 콘솔에 요소에 클릭 이벤트가 첨부 되었음이

0열

1답변

주어진 웹 페이지에서 모든 아웃 바운드 링크를 가져와 따르는 방법은 무엇입니까?

나는 웹 페이지 내의 모든 링크를 얻을이 코드가 있습니다이 from scrapy.spider import Spider from scrapy import Selector from socialmedia.items import SocialMediaItem from scrapy.contrib.linkextractors.sgml import SgmlLinkEx

-2열

2답변

긁어 내용

나는이 웹 페이지의 콘텐츠를 스크랩하기 위해 노력하고있어 : www.motorcyclemonster.com/motorcycle-events.html, 내가 사용하고 코드 것은 : <?php $content = file_get_contents('http://www.motorcyclemonster.com/motorcycle-events.html');

1열

1답변

두 테이블과 td 행 사이의 내용을 긁으십시오

안녕하세요, 저는이 지난 주에 저를 도와 주셨습니다. 지금 다른 옵션이 붙어 있습니다. 나는 두 테이블 사이에있는 정보를 캡처하려고 시도하고있다. 그런 다음 많은 테이블 행이있다. <table cellspacing="4" cellpadding="0" width="100%"> <tr> <td><b>DATE</b></td> <td>N

3열

1답변

nodejs 암호로 보호 된 웹 사이트에 대한 웹 스크레이퍼

나는 nodejs를 사용하여 웹 사이트를 긁어 내려고하고 있으며 인증을 필요로하지 않는 사이트에서 완벽하게 작동합니다. 하지만 사용자 이름과 암호가 필요한 양식을 사용하여 사이트를 다룰 때마다 인증 페이지에서 HTML 만 가져옵니다 (즉, 인증 페이지에서 '페이지 소스보기'를 클릭하면 HTML I입니다. 도망). 나는이 var request = requir