node.js 자바스크립트 웹 스크래핑

웹 스크래핑이란? 웹 사이트에서 원하는 데이터를 추출하는 작업인데요.

예를 들어 쇼핑몰에서 특정 상품의 정보, 가격, 리뷰, 구매 정보들을 가져올 수 있습니다. 이와 비슷한 의미의 웹 크롤링도 있는데요.

사이트 전체 정보를 정해진 규칙에 맞게 수집하는 과정으로 이때 사용하는 프로그램을 크롤러(스파이더)이라고 합니다. 준비 자바스크립트 웹 스크래핑을 위해 node.js 설치가 필요해요.

설치 방법은 아래 블로그를 참고해 보세요. node.js 설치 웹서버 만들기 웹 페이지 제작 시 빠질 수 없는 언어인 자바스크립트는 Web Browser에서만 실행된다는 한계 때문에 주로... blog.naver.com 패키지 설치 먼저 필요한 패키지를 설치합니다. HTTP 요청을 위한 Axios 와 HTML 구문 분석을 위한 Cheerio가 필요한데요.

CMD(명령 프롬프트) 창에 아래와 같이 입력합니다. npm install axios cheerio 프로젝트 생성 생성된 프로젝트 폴더로 이동 후 p...