5 Commits

Author SHA1 Message Date
mjjo
cba76dbe59 4 space -> tab으로 수정 2017-08-10 12:44:03 +09:00
mjjo
3d5e2d0c98 - 트위터 크롤러 수정
- 중복 제거 후 insert
  - proxy.txt가 모두 만료되면 db 사용
  - proxy db에서 중복 제거해서 가져오기
  - 프록시 문제로 페이지 요청 시 0.1초 딜레이
  - 크롤러 stop 동작하도록
  - realtime 적용
2017-07-28 14:29:05 +09:00
mjjo
fb7b3949d3 - requirements.txt 추가
- print 구문 주석
2017-07-27 11:27:27 +09:00
mjjo
08435ece8d 트위터 크롤러 1depth까지 완료 2017-07-20 11:00:20 +09:00
mjjo
fbbcc50df1 twitter timeline 크롤링 2017-07-18 11:12:43 +09:00