[ Selenium 실습 ] 파이썬 python, 셀레니움 Selenium 활용 네이버 뉴스와 댓글 한 번에 웹 클로닝 해 빅데이터 분석 마스터

파이썬(python), 셀리니움(Selenium)을 이용해 마우스 스크롤, 클릭 등을 자동화해 구들 이미지를 모두 다운로드해 보자... [ 셀레니움 Selenium으로 구글 이미지 크롤링 하기 ] 구글 이미지 다운로드 과정 셀레리움(Selenium)은 웹 페이지를 자유자재로 사용 및 통제할 수 있는 도구이기 때문에 구글 이미지처럼 마우스를 스크롤 하는 등 자바스크립트에 의해 동적으로 변하는 웹페이지의 자료를 어럽지 않게 가져올 수 있다. 먼저 본격적인 크롤링에 앞서 구글 이미지 페이지가 어떻게 작동되는지부터 살펴볼 필요가 있다.

유튜브 등 대부분의 동적 페이지 비슷하게 작동하기 때문에 다른 동적 웹 페이지 클로링에도 쉽게 적용할 수 있을 것이다. 요즘 음악차트 1위를 달리고 있는 '뉴진스' 이미지를 구글에서 검색하면 다음과 같은 웹 페이지를 확인할 수 있다.

그런 후 마우스를 아래로 스크롤 할 때마다 새로운 사진들이 업로드된다. 가장 마지막까지 내리면 '결과더보기' 버튼이 나온다. ...

요청 처리 중입니다...

[ Selenium 실습 ] 파이썬 python, 셀레니움 Selenium 활용 네이버 뉴스와 댓글 한 번에 웹 클로닝 해 빅데이터 분석 마스터

등록된 다른 글