파이썬 Flask 서버를 통해 내 컴퓨터에 서버를 돌리면, 크롤러 만들때 매우매우매우 도움됩니다. 이번 글에서 크롤러를 만들때 왜 파이썬 Flask 서버를 사용하는 것이 좋은지 알려드릴게요.
당신이 Selenium 기초 강의에 관심이 있으시다면 이 링크를 클릭해주세요. 크롤링에 파이썬 Flask 서버를 사용하는 이유는 '번거로움이 줄어들기 때문'입니다.
Selenium을 통해 동적인 크롤링을 할 때는 데이터를 얻기 위해서는 로그인을 꼭 해야한다던가(로그인 로직도 만들어야하고, 실수하면 첨부터 다시돌려야해서 귀찮음), 가입된 유저임을 인증을 해야 서비스를 이용할 수 있는 경우가 있습니다. 네이버 로그인을 해서 내가 추가한 이웃들의 계정을 가지고 온다던가 or 블랙위키의 크롤링 결과물을 가져오기 위해서 블랙위키에 가입된 유저임을 인증해야하는 경우가 있습니다.
만약 파이썬 flask 서버를 사용하지 않는다면 어떤 과정을 거쳐야하나요? 코드 한줄 고칠때마다 이걸 꼭 매번 실행해야할까요?
s...
#
Flask서버
#
파이썬flask
#
파이썬셀레니움
