웹 크롤러1 [python] 네이트판 웹 크롤러를 만들어보자! 2019-02-13-web_crawler 자연어 처리를 공부하던 중 문득 인터넷 상의 글들을 긁어모아서 학습해보면 재밌겠다 싶어서 웹 크롤링을 공부했다. 최근 게시물의 경향은 이미지 위주의 글이기 때문에 글 위주의 게시물이 있는 곳이 없을까 생각하다가 네이트판을 떠올렸다.간단한 웹 크롤링은 requests 모듈과 bs4의 BeautifulSoup 모듈만 있으면 가능하다.pip 모듈을 이용해 라이브러리를 설치해주자.pip install requestspip install bs4 웹 크롤링을 하기에 앞서 크롤링을 하고자 하는 웹 페이지의 구조를 분석해야 한다. 크롤링하려는 네이트판 랭킹 페이지 주소는 다음과 같다.https://pann.nate.com/Talk/Ranking?rankingType=total분.. 2019. 2. 13. 이전 1 다음
