1. 웹 크롤러 html로 만들어진 웹 페이지 속에는 수 많은 정보가 들어있습니다.
이런 정보를 수집하는 기계를 웹 크롤러 라고 합니다. 웹 크롤러는 정보를 수집하기 위해 웹 페이지의 html 구조를 확인하고 분석합니다.
예를 들어 태그 안에
태그가 작성되어 있으면, 제목이 있는 컨텐츠임을 크롤러가 인지하고 컨텐츠를 분류하여 그 내용을 저장합니다. 그리고 웹 크롤러는 그 내용을 저장하고 있다가 요청된(검색된) 내용에 맞게 사용자에게 제공합니다.
#
html
#
seo
#
검색엔진최적화
원문 링크 : [HTML] 검색 엔진 최적화(SEO)