Crawling Seminar

20180919 Crawling Seminar
Jung Yoon Sik, Human Factors and Ergonomics Lab., Dongguk Univ.

Description

크롤링 세미나에서 사용했던 발표자료와 예제 코드입니다. 실습 환경은 Anaconda Python 3.6입니다.

Setting

pip install -r requirements.txt

Run

#네이버 크롤러 실행
python naver_crawler.py
#디시 인사이드 크롤러 실행
python dcinside_crawler.py

실습1 네이버 크롤러 naver_crawler.py

네이버 실시간 검색어 순위를 크롤링해서 출력합니다.

실습2 디씨 인사이드 크롤러 dcinside_crawler.py

디씨 인사이드 식물 갤러리에서 지정한 게시글 번호를 가진 게시글을 크롤링 하여 CSV 파일로 출력합니다.