이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 8130 | 9년 전 | 459 | ||
| 8129 |
 Angelos |
9년 전 | 626 | |
| 8128 | 9년 전 | 496 | ||
| 8127 |
Angelos |
9년 전 | 558 | |
| 8126 | 9년 전 | 490 | ||
| 8125 | 9년 전 | 748 | ||
| 8124 |
Angelos |
9년 전 | 480 | |
| 8123 | 9년 전 | 465 | ||
| 8122 | 9년 전 | 401 | ||
| 8121 | 9년 전 | 509 | ||
| 8120 | 9년 전 | 442 | ||
| 8119 | 9년 전 | 523 | ||
| 8118 |
Angelos |
9년 전 | 607 | |
| 8117 |
 뜨거운형제들 |
9년 전 | 381 | |
| 8116 |
PASKRAN
|
9년 전 | 450 | |
| 8115 | 9년 전 | 442 | ||
| 8114 |
kiplayer
|
9년 전 | 584 | |
| 8113 | 9년 전 | 415 | ||
| 8112 |
Angelos |
9년 전 | 531 | |
| 8111 | 9년 전 | 381 | ||
| 8110 | 9년 전 | 424 | ||
| 8109 | 9년 전 | 334 | ||
| 8108 |
Angelos |
9년 전 | 522 | |
| 8107 |
Angelos |
9년 전 | 414 | |
| 8106 |
Angelos |
9년 전 | 409 | |
| 8105 | 9년 전 | 456 | ||
| 8104 |
Angelos |
9년 전 | 406 | |
| 8103 |
Angelos |
9년 전 | 408 | |
| 8102 |
Angelos |
9년 전 | 359 | |
| 8101 |
snshero
|
9년 전 | 750 | |
| 8100 | 9년 전 | 817 | ||
| 8099 | 9년 전 | 781 | ||
| 8098 | 9년 전 | 692 | ||
| 8097 | 9년 전 | 481 | ||
| 8096 | 9년 전 | 683 | ||
| 8095 | 9년 전 | 799 | ||
| 8094 | 9년 전 | 475 | ||
| 8093 | 9년 전 | 774 | ||
| 8092 | 9년 전 | 734 | ||
| 8091 | 9년 전 | 1126 | ||
| 8090 | 9년 전 | 735 | ||
| 8089 | 9년 전 | 942 | ||
| 8088 | 9년 전 | 615 | ||
| 8087 | 9년 전 | 721 | ||
| 8086 | 9년 전 | 494 | ||
| 8085 | 9년 전 | 457 | ||
| 8084 | 9년 전 | 599 | ||
| 8083 | 9년 전 | 569 | ||
| 8082 | 9년 전 | 735 | ||
| 8081 | 9년 전 | 446 | ||
| 8080 | 9년 전 | 532 | ||
| 8079 | 9년 전 | 489 | ||
| 8078 | 9년 전 | 419 | ||
| 8077 | 9년 전 | 495 | ||
| 8076 | 9년 전 | 384 | ||
| 8075 | 9년 전 | 398 | ||
| 8074 | 9년 전 | 365 | ||
| 8073 | 9년 전 | 416 | ||
| 8072 | 9년 전 | 405 | ||
| 8071 |
o1o111
|
9년 전 | 856 | |
| 8070 | 9년 전 | 374 | ||
| 8069 | 9년 전 | 302 | ||
| 8068 | 9년 전 | 567 | ||
| 8067 | 9년 전 | 374 | ||
| 8066 | 9년 전 | 402 | ||
| 8065 | 9년 전 | 353 | ||
| 8064 | 9년 전 | 333 | ||
| 8063 | 9년 전 | 294 | ||
| 8062 | 9년 전 | 285 | ||
| 8061 | 9년 전 | 331 | ||
| 8060 | 9년 전 | 352 | ||
| 8059 | 9년 전 | 285 | ||
| 8058 | 9년 전 | 225 | ||
| 8057 | 9년 전 | 350 | ||
| 8056 | 9년 전 | 279 | ||
| 8055 | 9년 전 | 312 | ||
| 8054 | 9년 전 | 330 | ||
| 8053 | 9년 전 | 370 | ||
| 8052 | 9년 전 | 258 | ||
| 8051 | 9년 전 | 303 | ||
| 8050 | 9년 전 | 366 | ||
| 8049 | 9년 전 | 288 | ||
| 8048 | 9년 전 | 401 | ||
| 8047 | 9년 전 | 335 | ||
| 8046 | 9년 전 | 263 | ||
| 8045 | 9년 전 | 237 | ||
| 8044 | 9년 전 | 300 | ||
| 8043 | 9년 전 | 241 | ||
| 8042 | 9년 전 | 268 | ||
| 8041 | 9년 전 | 304 | ||
| 8040 | 9년 전 | 238 | ||
| 8039 | 9년 전 | 299 | ||
| 8038 | 9년 전 | 251 | ||
| 8037 | 9년 전 | 363 | ||
| 8036 | 9년 전 | 449 | ||
| 8035 | 9년 전 | 402 | ||
| 8034 | 9년 전 | 364 | ||
| 8033 | 9년 전 | 318 | ||
| 8032 | 9년 전 | 369 | ||
| 8031 | 9년 전 | 309 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기