네이버 기사리스트 가져오기 - 크롤링

PHP를 이용하여 네이버 기사리스트를 크롤링 하는 소스이다. 가져온 HTML 은 simplehtmldom 을 사용하여 파싱하였다.

페이지를 지정하여 원하는 페이지까지 크롤링 할 수 있다. include_once './_simplehtmldom/simple_html_dom.php'; $ePage = 3; $url = "https://news.naver.com/main/list.naver?

mode=LSD&mid=sec&sid1=001&date=20220104&page="; $html = new simple_html_dom(); for($i=1;$i<=$ePage;$i++){ $temp = get_content("{$url}{$i}"); if(!$temp) break; $html->load($temp); //상단 10개 기사 if($html->find('ul[class=type06_headline]',0)){ foreach($html->find('ul[class=type06_headlin...