admin
8c500a03d0
카테고리 반영
...
git-svn-id: svn://192.168.0.12/source@258 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-05-10 01:23:56 +00:00
admin
0c568df009
new filterprocess
...
git-svn-id: svn://192.168.0.12/source@257 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-03-31 08:11:07 +00:00
admin
d2b51d16e8
2016-02-24 나머지 수정 들어가기 전에 백업
...
git-svn-id: svn://192.168.0.12/source@256 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-24 09:57:45 +00:00
admin
631710f631
1.형태소분석 centerkeyword 방식 추가
...
2.일괄처리방식 search 마지막에 스페이스 있을 경우 분석결과가 나오지 않는 오류
3.형태소분석 위젯 순서 변경
4.anlayzer new column 할 경우 QTableWidgetItem(QString(" ")) 수행되도록 수정
5.엑셀에서 붙혀 넣기할 때 row 가 추가될 경우 빈 cell에 공백 추가하기(4번과 유사함)
git-svn-id: svn://192.168.0.12/source@255 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-23 10:17:09 +00:00
admin
a508dc8daa
kakaostory 업데이트 대응
...
utf-8 4byte emoji 공백처리
git-svn-id: svn://192.168.0.12/source@254 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-23 08:42:47 +00:00
admin
9f2f38d360
/// 가 생기는 문제 수정
...
git-svn-id: svn://192.168.0.12/source@253 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-19 04:00:58 +00:00
admin
2d47116b1b
body에서 id nickname 잘못가져오는 문제 디버깅
...
git-svn-id: svn://192.168.0.12/source@252 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-02 03:01:33 +00:00
admin
519e40c9b8
nickname 잘못가져오는 버그 수정
...
git-svn-id: svn://192.168.0.12/source@251 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-01 10:23:32 +00:00
admin
eeee7d4565
facebook id 크롤링 잘못 되는것 수정
...
git-svn-id: svn://192.168.0.12/source@250 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-02-01 06:55:20 +00:00
admin
e663eac55b
임시적으로 sns 업로드가 가능하도록 변경
...
git-svn-id: svn://192.168.0.12/source@249 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-29 09:45:41 +00:00
admin
aba95f750e
db 재접속 수정
...
git-svn-id: svn://192.168.0.12/source@248 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-29 09:12:42 +00:00
admin
44c1dbc2c3
git-svn-id: svn://192.168.0.12/source@247 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-29 09:11:40 +00:00
admin
57d3c728b6
platform_name = 'post', 'story', 'channel'의 경우
...
'sns'로 변경
git-svn-id: svn://192.168.0.12/source@246 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-28 07:15:09 +00:00
admin
05b29b75a8
최신 analyzer + 형태소 분석기 합쳐놓음
...
git-svn-id: svn://192.168.0.12/source@245 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-28 07:14:23 +00:00
admin
e0f305bcb6
일괄처리 추가
...
platform_name = 'post', 'story', 'channel'일 경우 sns으로 변경
git-svn-id: svn://192.168.0.12/source@244 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-28 07:13:47 +00:00
admin
1ea6d6fd29
버즈량 계산시 days 옵션의 from, to 파라미터 고려
...
git-svn-id: svn://192.168.0.12/source@243 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-19 07:14:59 +00:00
admin
7b9bddc989
setup.ini 기능추가
...
[days]
from=####-##-## (시작 날짜 설정)
to=####-##-## (종료 날짜 설정
git-svn-id: svn://192.168.0.12/source@242 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-19 06:53:10 +00:00
admin
21b11500bd
selenium, beautifulsoup4로 구현한 python 크롤러
...
git-svn-id: svn://192.168.0.12/source@241 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-19 06:52:00 +00:00
admin
73ede17add
blog 크롤링 안되는 부분 추가
...
git-svn-id: svn://192.168.0.12/source@240 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-19 06:48:49 +00:00
admin
f25230c652
facebook 추가
...
timeout시 재접속 할수 있도록 수정
git-svn-id: svn://192.168.0.12/source@239 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-19 06:47:32 +00:00
admin
ef669df7ad
키워드 삽입시 기간 자동분할 기능
...
크롤링 삽입시 키워드 다중선택 기능
git-svn-id: svn://192.168.0.12/source@238 8346c931-da38-4b9b-9d4c-e48b93cbd075
2016-01-14 07:17:35 +00:00
admin
7994b43baa
네이버 블로그 smart 3.0 관련 수정
...
git-svn-id: svn://192.168.0.12/source@237 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-31 04:41:04 +00:00
admin
c4a3ace018
블로그 smart 3.0 업데이트 ㅎㄷㄷㄷ
...
git-svn-id: svn://192.168.0.12/source@236 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-31 04:39:43 +00:00
admin
f192ec56f2
naver news Entertainment 수정
...
git-svn-id: svn://192.168.0.12/source@235 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-28 09:53:27 +00:00
admin
bfd8f7dd67
카카오, 인스타, 네이버 카페 추가
...
git-svn-id: svn://192.168.0.12/source@234 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-24 06:49:44 +00:00
admin
11ce135261
kakao 추가
...
instagram 추가
git-svn-id: svn://192.168.0.12/source@233 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-24 06:45:53 +00:00
admin
57d596d083
git-svn-id: svn://192.168.0.12/source@232 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-24 06:43:21 +00:00
admin
6b3521002a
네이버 뉴스 수정
...
네이버 블로그 본문 수정
git-svn-id: svn://192.168.0.12/source@231 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-24 01:39:40 +00:00
admin
820fa031e2
naver news 수정
...
git-svn-id: svn://192.168.0.12/source@230 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-24 01:39:18 +00:00
admin
cc8122e074
WebBasedCrawler 추가
...
git-svn-id: svn://192.168.0.12/source@229 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-07 03:25:49 +00:00
admin
29a09e3307
git-svn-id: svn://192.168.0.12/source@228 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-07 03:23:40 +00:00
admin
47e2d27ba2
kakao 추가
...
git-svn-id: svn://192.168.0.12/source@227 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-07 03:23:26 +00:00
admin
9a9d674a11
kakao 추가
...
git-svn-id: svn://192.168.0.12/source@226 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-12-07 03:23:07 +00:00
admin
c9b96a76a5
navercrawl 종료방법 변경
...
git-svn-id: svn://192.168.0.12/source@225 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-20 10:09:06 +00:00
admin
2eb2d91f76
NaverCafeListManager 추가
...
네이버카페리스트 관리
git-svn-id: svn://192.168.0.12/source@224 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-11 06:52:37 +00:00
admin
499550b2c1
NaverCafeList 추가
...
git-svn-id: svn://192.168.0.12/source@223 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-11 06:51:31 +00:00
admin
c12705430c
NaverCafeListManager 추가
...
git-svn-id: svn://192.168.0.12/source@222 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-11 06:51:11 +00:00
admin
65767c20cc
blog 크롤러 무한 리로드 버그 수정
...
git-svn-id: svn://192.168.0.12/source@221 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-09 10:22:06 +00:00
admin
119b947108
에러 발생시 로그 저장
...
git-svn-id: svn://192.168.0.12/source@220 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-02 03:27:12 +00:00
admin
1d55d53e04
크롤러리스트 start() 시 dbopen 체크
...
git-svn-id: svn://192.168.0.12/source@219 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-11-02 02:17:19 +00:00
admin
d48ec1fbcb
navernews 댓글 가져오기 수정
...
json형식 뒤에 이상한 문자들이 붙어있어서 오류를 일으킴
git-svn-id: svn://192.168.0.12/source@218 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-29 02:07:35 +00:00
admin
b297d693d7
네이버 블로그 크롤링 오류시 timer를 통해 webpage 읽어오도록 수정
...
git-svn-id: svn://192.168.0.12/source@217 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-28 08:15:34 +00:00
admin
ec55f45ce4
리눅스에서 Process 들이 ./로 실행되도록 수정
...
실시간 크롤러에서 오늘날짜 +1이 되는 오류 수정
crawlerfinish 이후 db가 끊기면 재시도 하지 않는 버그 수정(테스트 꾸준히 해봐야함)
git-svn-id: svn://192.168.0.12/source@216 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-28 08:13:59 +00:00
admin
0311c2abfc
daum cafe 댓글 아이디 크롤링 오류 수정
...
git-svn-id: svn://192.168.0.12/source@215 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-28 08:10:55 +00:00
admin
c42d1c3d20
blog_list 에서 url 가져오는 방식 변경
...
git-svn-id: svn://192.168.0.12/source@214 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-22 04:29:21 +00:00
admin
980f597433
백업
...
git-svn-id: svn://192.168.0.12/source@213 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-21 01:34:24 +00:00
admin
12b209ee7c
헤더 대소문자 수정
...
git-svn-id: svn://192.168.0.12/source@212 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-15 06:29:03 +00:00
admin
28149181d5
header 수정
...
git-svn-id: svn://192.168.0.12/source@211 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-15 06:24:52 +00:00
admin
4136991edc
ymtwodepthawidget 추가
...
git-svn-id: svn://192.168.0.12/source@210 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-15 06:20:45 +00:00
admin
cf56b35cd6
헤더 대소문자 수정
...
git-svn-id: svn://192.168.0.12/source@209 8346c931-da38-4b9b-9d4c-e48b93cbd075
2015-10-14 04:17:30 +00:00