[크롤링]크롤링이란?

- 크롤러알고리즘에 의해 인터넷을 탐색하는 프로그램- 다양한 크롤러스크래퍼, 봇, 스파이더, 지능 에이전트- 크롤링크롤러가 동적하는 것- 스크래핑스크래퍼가 동작하는 것- 크롤링한다페이지를 돌아다니는 행위인 크롤링과 특정 페이지의 데이터를 수집하는 행위인 스크래핑이 합쳐져서 통상적으로 크롤링한다라고 표현- 클라이언트와 서버클라이언트는 데이터 서비스를 요청하는 프로그램 의미ex) 컴퓨터 프로그램, 어플, chrome같은 웹 브라우저 등서버는 인터넷을 통해 연결된 클라이언트에 데이터 또는 서비스를 제공하는 프로그램- 서버의 종류1) 영상 서버 > 일정량 분할하여 전송, 스트리밍2) 파일 서버 > P2P, 토..........