mjjo
2f324b1710
- multithreading으로 모든 depth 크롤링
2017-07-25 17:44:02 +09:00
mjjo
4d6aef1310
- timestamp 처리
...
- 실패한 runner 한번 더 시도
2017-07-21 12:04:10 +09:00
mjjo
08435ece8d
트위터 크롤러 1depth까지 완료
2017-07-20 11:00:20 +09:00
mjjo
1496644cc2
접속 실패한 프록시 주석처리해서 다시 사용하지 않는 기능 추가
...
- 플랫폼별로 처리하는 기능 필요
2017-07-20 10:58:13 +09:00
mjjo
fbbcc50df1
twitter timeline 크롤링
2017-07-18 11:12:43 +09:00
mjjo
81bbad8f19
twitter, youtube 크롤러 추가 시작
2017-07-04 14:29:41 +09:00
mjjo
f6310e7922
.user 파일 삭제
2017-07-04 14:28:14 +09:00
mjjo
bc89f4d0f1
인스타그램 effect crawler 버그 수정
2017-07-04 14:26:14 +09:00
mjjo
3d806ae5db
인스타 크롤러 주석 제거 및 백업 파일들 삭제
2017-06-30 17:26:00 +09:00
mjjo
5d15913c7a
.gitignore 추가
2017-06-30 17:25:25 +09:00
mjjo
bba53e2fae
- 인스타그램 크롤러 수정
...
- 로그 수정
- reply 크롤링 버그 수정
2017-06-30 15:44:49 +09:00
admin
1e449a45af
- instagram 크롤러 수정 (Tag, Comment, User)
...
- Debug 메시지 수정
git-svn-id: svn://192.168.0.12/source@351 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-06-29 03:12:39 +00:00
admin
b2e4fdadb3
git-svn-id: svn://192.168.0.12/source@350 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-06-05 02:42:07 +00:00
admin
80f1b61839
git-svn-id: svn://192.168.0.12/source@349 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-06-01 09:50:18 +00:00
admin
b873412ef2
git-svn-id: svn://192.168.0.12/source@348 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-05-30 03:32:11 +00:00
admin
dad0365a79
git-svn-id: svn://192.168.0.12/source@347 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-05-30 01:35:44 +00:00
admin
fab5f51c85
git-svn-id: svn://192.168.0.12/source@346 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-04-14 02:30:18 +00:00
admin
4fa93a7cc4
git-svn-id: svn://192.168.0.12/source@345 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-03-29 03:19:06 +00:00
admin
ec45528679
git-svn-id: svn://192.168.0.12/source@344 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-03-29 02:49:18 +00:00
admin
8ec8a773ad
git-svn-id: svn://192.168.0.12/source@343 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-19 10:30:58 +00:00
admin
53d5da70de
git-svn-id: svn://192.168.0.12/source@342 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-19 10:17:19 +00:00
admin
ecd8deb87d
윤기영
...
base/baseclasses 의 firefox geckodriver 로드 하는 부분 수정
git-svn-id: svn://192.168.0.12/source@341 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-18 08:43:36 +00:00
admin
7b87a7fd7e
firefox gecko driver 추가
...
git-svn-id: svn://192.168.0.12/source@340 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-18 02:02:10 +00:00
admin
2d0b6b84d7
test update
...
git-svn-id: svn://192.168.0.12/source@339 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-16 07:32:16 +00:00
admin
33763bc9a6
Test
...
git-svn-id: svn://192.168.0.12/source@338 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-16 04:08:47 +00:00
admin
67dffda91c
git-svn-id: svn://192.168.0.12/source@337 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-16 04:05:55 +00:00
admin
80224e09b1
스크립트파일
...
git-svn-id: svn://192.168.0.12/source@336 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-06 10:23:35 +00:00
admin
40f29bdf51
effect
...
git-svn-id: svn://192.168.0.12/source@335 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-06 07:21:32 +00:00
admin
a296920e74
effect 수정
...
git-svn-id: svn://192.168.0.12/source@334 8346c931-da38-4b9b-9d4c-e48b93cbd075
2017-01-06 07:20:57 +00:00
admin
a8014e257e
effect update time 업로드하도록 수정
...
기타 오류 수정
git-svn-id: svn://192.168.0.12/source@333 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-30 07:51:45 +00:00
admin
d700405547
crawlerList
...
네이버뉴스 댓글숫자크롤링
git-svn-id: svn://192.168.0.12/source@332 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-27 09:18:04 +00:00
admin
ea4a3c8f11
git-svn-id: svn://192.168.0.12/source@331 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-26 10:26:49 +00:00
admin
bcecd771c6
blog crawler 수정
...
댓글넘버 및 공감 넣기
git-svn-id: svn://192.168.0.12/source@330 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-23 08:59:24 +00:00
admin
637ce292d1
filterprocess update시 sqlString 변환
...
git-svn-id: svn://192.168.0.12/source@329 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-20 09:22:25 +00:00
admin
08185d120b
EffectUI : 크롤링해오는 텀 조절
...
FilterProcess : ??? 글쎄???
GroupManager : Group 부분 수정 Copy 중복 포함해서 넘김(속도), Clear, Delete 삭제, List Export 추가, Refresh 선택한 것만 갱신하도록 수정
git-svn-id: svn://192.168.0.12/source@328 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-08 10:20:39 +00:00
admin
7e0e6b94c6
kakaostory 오전 12:00 표기 문제 해결
...
git-svn-id: svn://192.168.0.12/source@327 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-01 03:35:22 +00:00
admin
e9063aa9c9
crawlerlist naver - cafe, blog ; list 가져오는 url 수정
...
git-svn-id: svn://192.168.0.12/source@326 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-12-01 02:54:57 +00:00
admin
9306969bea
filterprocess consumer / spammer 그래프 수정
...
카카오스토리 modified date가 위로 올라오는 문제로 인해
과거 댓글이 그래프구간에 영향을 끼치는 문제 수정
git-svn-id: svn://192.168.0.12/source@325 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-30 09:09:35 +00:00
admin
e2f9700d20
batch log 추가
...
git-svn-id: svn://192.168.0.12/source@324 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-29 09:19:28 +00:00
admin
e9f67744ab
FilterProcess sservice.cpp 파일 추가
...
git-svn-id: svn://192.168.0.12/source@323 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-29 07:48:20 +00:00
admin
a7ec2f63fd
filterprocess debug/upload 설정 추가
...
setup.ini의 [settings] 옵션 하부에
upload=o
debug=x
설정가능
설정은 o,x로 가능함
기본설정은 upload=o, debug=x
git-svn-id: svn://192.168.0.12/source@322 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-29 07:35:43 +00:00
admin
60f692f641
filterprocess debug 모드 추가
...
git-svn-id: svn://192.168.0.12/source@321 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-28 10:20:10 +00:00
admin
a2c55d909b
shttpsender host: ip를 url로 보내기(가비아에서 먹히지 않음)
...
git-svn-id: svn://192.168.0.12/source@320 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-24 11:08:17 +00:00
admin
d6e259a3de
httpsender url 요청 수정
...
git-svn-id: svn://192.168.0.12/source@319 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-22 07:51:09 +00:00
admin
87996afa7a
spammer 카테고리 생성하지 않아도 잘 들어가게 수정
...
git-svn-id: svn://192.168.0.12/source@318 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-22 03:50:28 +00:00
admin
b2242ca378
필터 powercafe 수정
...
컨슈머 / 스패머 카테고리가 1개일 경우 map이 안들어가는 문제 수정
git-svn-id: svn://192.168.0.12/source@317 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-21 10:10:14 +00:00
admin
1cae1cea88
프로젝트 이름 변경
...
FilterProcess -> Legacy_FilterProcess로 변경
sfilterprocess -> FilterProcess로 변경
git-svn-id: svn://192.168.0.12/source@316 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-21 07:09:35 +00:00
admin
f7c4ad21b9
sns 처리 수정
...
filter 처리 수정
git-svn-id: svn://192.168.0.12/source@315 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-18 10:07:36 +00:00
admin
4e6aead7b3
filter 최종 종료시에 website에 이를 알리는 기능
...
git-svn-id: svn://192.168.0.12/source@314 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-11 06:24:32 +00:00
admin
9f95082415
로그출력수정
...
git-svn-id: svn://192.168.0.12/source@313 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-11-10 10:06:45 +00:00