웹 크롤링1 웹 크롤링을 하는 이유와 방법 웹 크롤링을 하는 이유 인터넷에는 엄청난 양의 자료 및 정보들이 쌓여있습니다. 하지만 정작 원하는 데이터들은 불행히도 쉽게 정리된 CSV 파일을 사용할 수 없는 경우가 대다수입니다. 여러 웹 사이트에서 데이터를 긁어모으기 위해서 웹스크래핑(웹 크롤링)을 시도해야 합니다.일부 웹 사이트는 CSV 형식으로 데이터를 다운로드하거나 API(응용 프로그램 프로그래밍 인터페이스)를 통해 액세스할 수 있는 데이터 세트를 제공합니다. 그러나 유용한 데이터가 있는 많은 웹 사이트는 이러한 편리한 옵션을 제공하지 않습니다. 예를 들어, 국립 기상청의 웹 사이트를 생각해 보세요. 여기에는 모든 지역에 대한 최신 일기예보가 포함되어 있지만 기상 데이터는 CSV로 또는 API로 액세스할 수 없습니다. 이 데이터를 분석하거나 다.. 2021. 2. 19. 이전 1 다음 반응형