많은 페이지를 웹크롤링 할려면 어떤걸로 하는게 빠를까요 ?

Question

여러 페이지의 정보를 웹크롤링 해서 내가 원하는 자료는 추출할려고 하는데

파이썬으로 하는것과 엑셀 vba로 하는것중에 어떤게 여러페이지의 정보를 웹크롤링해서 자료를 추출할떄 빠르

게 처리 할수 있까요 ?

Answer 1

파이썬은 다양한 라이브러리와 프레임워크를 제공하여 웹 크롤링을 쉽게 할 수 있습니다.

예를 들어 BeautifulSoup이나 Scrapy 같은 라이브러리를 사용하면 많은 페이지를 동시에 크롤링하고 데이터를 효율적으로 처리할 수 있어요.

엑셀 VBA도 가능하지만 대량의 데이터를 다룰때는 속도가 느려질 수 있어요..