web-scraping

1열

2답변

하나의 스크립트로 다른 소스 코드로 다른 사이트의 데이터를 긁는 방법은 무엇입니까?

다른 웹 사이트에서 사용할 수있는 다른 프로필 이름을 구문 분석하기 위해 Python으로 스크립트를 작성했습니다. 각 링크는 프로파일 정보가있는 각 개인에게 연결됩니다. 이 순간, 나는 그들의 프로필 이름을 긁는 데에만 관심이 있습니다. 내 스크립트에서 3 명의 다른 사람에게 3 가지 다른 링크를 제공했습니다. 아래 스크립트는 정상적으로 작동합니다. 세 사

0열

1답변

웹 스크래핑 다중 처리가 작동하지 않습니다.

많은 수의 URL에서 웹 스크래핑을 사용하려고하는데 속도를 높이기 위해 멀티 프로세싱을 적용했지만 왜 속도가 향상되지 않는지 모릅니다. 여기에 내 코드의 일부입니다 def scrap(url,output_path): page = urlopen(URL) soup = BeautifulSoup(page, 'html.parser') ite

2열

1답변

Python Selenium ChromeDriver 오류 메시지 : EGL_NOT_INITIALIZED

Windows 7 및 Python 3.6에서 ChromeDriver 2.34.522940 및 Serenium 3.8.0을 실행 중입니다. 이 코드 노력하고있어 : def foo(url, login, password): from selenium import webdriver from selenium.webdriver.common.keys i

1열

1답변

웹에서 여러 링크로 r을 긁음

rvest 및 selectorgadget을 사용하여 여러 링크에서 r으로 일부 테니스 통계를 다 써 버리려합니다. 내가 긁은 페이지는 http://www.atpworldtour.com/en/scores/archive/stockholm/429/2017/results이며 "http://www.atpworldtour.com/en/scores/2017/429/MS

1열

2답변

선택은 내가 <a href="https://www.indeed.cl/trabajo?q=Data%20scientist&l=" rel="nofollow noreferrer">Indeed</a>에서 한 페이지의 소스를 다운로드

scrapy에 하나 하나 결과와 나는 내가이 XPath를 사용하고, 거기에서 모든 직책을 얻으려고 : response.xpath('//*[@class=" row result"]//*[@class="jobtitle"]//text()').extract() 문제는 결과가 따라서 한 줄에없는 것을있다이 결과 얻기 : 제가 원하는 것은 하나 하나 과정을 작업을

0열

1답변

myneta에서 테이블을 긁어 모으기 R

http://myneta.info/uttarpradesh2017/index.php?action=summary&subAction=candidates_analyzed&sort=candidate#summary에서 내 R 스튜디오로 테이블을 긁어 내려고합니다. 여기 코드 url<-'http://myneta.info/uttarpradesh2017/index.php?

1열

2답변

Beautiful Soup Parse Python

BS4을 사용하여 다음 HTML을 캡처했지만 아티스트 태그를 검색 할 수 없습니다. 내가 용기라는 변수에 코드 블록을 할당 한 다음 행운없이 print container.tr.td["artist"] 을 시도했습니다. 조언을 주시면 감사하겠습니다. <tr class="item"> <!-- <td class="image"><a href="https

0열

1답변

나는 DDOS 방지 페이지를 표시하는 동안 5 초 지연이있는 웹 사이트를 긁어 시도하고 약간의 시간

에 대한 리디렉션 웹 사이트를 긁어하는 방법, 웹 사이트는 내가 Python3을 사용하고 Koinex 입니다 그리고 BeuwtifulSoup, 나는 요청을 보낸 후 내용을 읽기 전에 시간 지연을 intrduce해야 할 것이라고 생각합니다. 여기 는 지금까지 import requests from bs4 import BeautifulSoup url = 'h

0열

1답변

웹 페이지에서 값 추출하기

좋은 하루 - 여러 번 언급했음을 확신하지만, 나는 가능한 모든 방법을 시도했지만 여전히 작동하지 않습니다. 나는 다음과 같은 코드가 웹 사이트에서 값을 긁어하려고 : Sub ImportCurrentPrice2() Dim appIE As Object Set appIE = CreateObject("internetexplorer.applic

-1열

1답변

어떻게 파이썬을 사용하여 사이트를 긁어 모으는 동안 출력으로 여러 링크의 문제를 해결할 수 있습니까?

python 및 학습 웹 스크래핑을 처음 사용합니다. 이 같은 사이트에서 제목과 링크 (안 제목 링크)를 긁어하려고 : Title 1 Link 1 Title 2 Link 2 Title 3 Link 3 하지만 문제는 것은 (링크), 내가 루프 중첩이 작업을 수행하려고 이런 식으로 할 수