Python, 웹 크롤링(crawling) 정복해보자! -1탄-

최근 데이터 분석 의뢰가 들어왔다. 우리 회사는 소프트웨어 개발 및 데이터 분석을 진행하는 회사이기에, 이런 의뢰는 매출과 직결되는 매우 환영할 일이었다.

하.지.만. 세상일이 그리 만만하더냐 닝겐아!!!

의뢰자분의 데이터는 우리 모델로 돌리기에는 그 양(데이터 표본수)과 질(연구 목적과 데이터의 상관 관계)이 부족했고, 결국 거래는 성사되지 못했다. 이번에 내가 느낀 건, 프로그램 언어에 익숙하지 않은 분들은 데이터 수집에 많은 어려움이 있을 것이라는 점이었으며, 이번 기회를 통해 데이터를 모으는 가장 쉬운 방법인 웹 크롤링을, 1) 컴퓨터를 모르는 사람들도 2) 이해할 수 있는 세세한 설명 을 통해 안내하는 글을 써보고자 한다(바로 시작해보자). ### 파이썬 웹 크롤링을 알아보자. ### 파이썬 웹 크롤링을 해보자!!!

1. "웹 크롤링"은 도대체 무엇인가?

그럼 크롤링은 도대체 무엇을 의미하는 말일까? 의미를 알기 위해 용어를 일단 파악해보자.

크롤링의 Crawl은 기어가다라...