bs4

0열

1답변

이 그래서 난이 중복하지만 난 내 관련 답변을 찾을 수없는 경우 사과 내 첫 번째 게시물입니다. 하나 있으면 알려주세요. 나는 그것을 조사 할 것입니다. 버클리 임대료 상한을 찾기 위해 웹 사이트 (아래)를 긁어 모으려고하고 있는데, 내가 가지고있는 문제는 검색 상자에 주소를 삽입하고 다음 페이지에서 정보를 긁는 방법을 알아낼 수 없다는 것입니다. . 과거

0열

1답변

시간 초과시 파이썬에서 urllib로 URL 열기를 다시 시도하십시오.

파이썬 (> 10k)을 사용하여 다수의 웹 페이지에서 데이터를 구문 분석하려고합니다. 500 루프마다 오류가 발생합니다. 나는 이것을 try - except 코드 블록으로 고치려고 시도했지만 오류를 반환하기 전에 url을 4 번 또는 5 번 열어 재 시도하려고 함수를 개선하고 싶다. 이것을 할 수있는 우아한 방법이 있습니까? 아래 내 코드 : def url

1열

1답변

Python을 사용하여 웹에서 데이터 스크래핑 xhr feed

테니스 경기 결과를 this webpage에서 긁어 내려고했습니다. 특히 두 선수의 이름, 날짜/시간 및 경기 결과를 얻으려고합니다. 나는 두 가지 문제가 오전 :이 웹 페이지는 기본적으로 모든 일치를 표시하지 않습니다 -이 단지 클릭하여 공개 될 수 있습니다 페이지 하단의 '더 일치를 보여줍니다. " 아름다운 수프에 html을로드 할 때 데이터가 나타나지

0열

1답변

일반 크롤링 데이터에서 Beautifull 스프가 텍스트 추출에 너무 많은 시간이 걸립니다.

일반 크롤링 데이터 세트 (warc.gz 파일)에서 html 콘텐츠를 구문 분석해야합니다. 대부분 사람들이 제안하기 때문에 bs4 (Beautifulsoup) 모듈을 사용하기로 결정했습니다. 얻을 수있는 코드가되어 다음과 같은 텍스트 : from bs4 import BeautifulSoup soup = BeautifulSoup(src, "lxml")

0열

1답변

내가 BS4을 가져올 때 python3.6에 대해서는,

내가 같이 BS4를 가져 작동하지 않습니다 from bs4 import BeautifulSoup 하지만이 같은 오류가 발생합니다 : Traceback (most recent call last): File "/Users/koudai232/Desktop/test.py", line 4, in <module> from bs4 import Be

0열

2답변

웹 크롤러 다중 페이지 반복

크롤러가 다음 페이지로 이동하여 데이터를 추출하도록합니다. 나는 무엇을해야 할지를 놓치고 있습니다. 나는 치료법을 시도했지만 다소 복잡하고 bs4가 더 편리합니다. import bs4 as bs import urllib.request import pandas as pd import re source = urllib.request.urlopen('

1열

1답변

bs4는 변수 이름을 반환하지만 내용은 포함하지 않습니다.

저는 attampt에서 bs4를 사용하여 이미지에 대한 웹 링크를 the metropolitan에서 가져옵니다. url = 'http://www.metmuseum.org/art/collection#!?material=Canvas&showOnly=onDisplay&offset=1780&pageSize=0&sortBy=Relevance&sortOrder=asc

0열

1답변

태그 attr 'data-title'을 추출하고 있습니다. beautifulsoup4

data-title 및 data-url attr을 사용하여 모든 div 태그를 추출하려고합니다. 같은 목록을 작성하기 위해 코드를 선호하십니까 : [urltest4, urltest1, urltest2, urltest3] 데이터 제목 에 대한 [TEST1, TEST2, TEST3, TEST4] 데이터 URL 에 대한 을 샘플 데이터, <div id="cont

0열

3답변

BeautifulSoup에 문제가 있고 구문 분석을 요청합니다.

BeautifulSoup 및 요청 모듈을 사용하려고 할 때 오류가 발생합니다. 이 오류 발생 import requests from bs4 import BeautifulSoup def get_html(url): url = ('https://m.vk.com/bageto?act=members&offset=0') r = requests.ge

0열

1답변

BeautifulSoup 및 Python을 사용하여 상위 태그를 검색 할 수 없습니다.

Instagram 페이지에서 img 태그의 부모 요소를 검색하려고합니다. from urllib.request import urlopen from bs4 import BeautifulSoup url=urlopen("https://www.instagram.com/people") html=url.read() soup=BeautifulSoup(html,"