-2
나는 Scrapy를 사용하여 웹 페이지를 크롤링하려고합니다. 그러나 일부 동적 기능을로드 한 후 페이지를 스크롤하는 동안 크롤링하려고하는 웹 (https://www.edx.org/course/)이로드됩니다.동적 웹 크롤링
Scrapy에 대한 일부 문서를 읽은 후에 스파이더를 사용하여 필요한 정보를 얻는 방법에 대한 해결책을 찾지 못했습니다. 그것을하는 방법에 대한 제안?
나는 Scrapy를 사용하여 웹 페이지를 크롤링하려고합니다. 그러나 일부 동적 기능을로드 한 후 페이지를 스크롤하는 동안 크롤링하려고하는 웹 (https://www.edx.org/course/)이로드됩니다.동적 웹 크롤링
Scrapy에 대한 일부 문서를 읽은 후에 스파이더를 사용하여 필요한 정보를 얻는 방법에 대한 해결책을 찾지 못했습니다. 그것을하는 방법에 대한 제안?
짧은 대답은 당신이 단순히 치료만을 사용해서는 안된다는 것입니다.
길게 대답은 here
입니다.