이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 8230 | 9년 전 | 102 | ||
| 8229 | 9년 전 | 102 | ||
| 8228 |
커네드커네드
|
9년 전 | 147 | |
| 8227 | 9년 전 | 177 | ||
| 8226 | 9년 전 | 198 | ||
| 8225 | 9년 전 | 182 | ||
| 8224 | 9년 전 | 172 | ||
| 8223 | 9년 전 | 153 | ||
| 8222 |
 웹표준3년차 |
9년 전 | 229 | |
| 8221 | 9년 전 | 131 | ||
| 8220 | 9년 전 | 158 | ||
| 8219 | 9년 전 | 128 | ||
| 8218 | 9년 전 | 178 | ||
| 8217 |
star3840
|
9년 전 | 145 | |
| 8216 | 9년 전 | 206 | ||
| 8215 | 9년 전 | 161 | ||
| 8214 | 9년 전 | 257 | ||
| 8213 | 9년 전 | 208 | ||
| 8212 | 9년 전 | 124 | ||
| 8211 | 9년 전 | 298 | ||
| 8210 | 9년 전 | 299 | ||
| 8209 | 9년 전 | 372 | ||
| 8208 | 9년 전 | 269 | ||
| 8207 | 9년 전 | 267 | ||
| 8206 |
 웹의미래는딥러닝 |
9년 전 | 224 | |
| 8205 | 9년 전 | 213 | ||
| 8204 | 9년 전 | 174 | ||
| 8203 | 9년 전 | 263 | ||
| 8202 | 9년 전 | 175 | ||
| 8201 | 9년 전 | 216 | ||
| 8200 | 9년 전 | 214 | ||
| 8199 | 9년 전 | 246 | ||
| 8198 | 9년 전 | 208 | ||
| 8197 | 9년 전 | 197 | ||
| 8196 | 9년 전 | 589 | ||
| 8195 | 9년 전 | 196 | ||
| 8194 | 9년 전 | 321 | ||
| 8193 | 9년 전 | 204 | ||
| 8192 | 9년 전 | 232 | ||
| 8191 | 9년 전 | 183 | ||
| 8190 | 9년 전 | 185 | ||
| 8189 | 9년 전 | 239 | ||
| 8188 | 9년 전 | 173 | ||
| 8187 | 9년 전 | 183 | ||
| 8186 | 9년 전 | 179 | ||
| 8185 | 9년 전 | 358 | ||
| 8184 | 9년 전 | 141 | ||
| 8183 | 9년 전 | 353 | ||
| 8182 | 9년 전 | 210 | ||
| 8181 | 9년 전 | 176 | ||
| 8180 | 9년 전 | 743 | ||
| 8179 | 9년 전 | 521 | ||
| 8178 | 9년 전 | 362 | ||
| 8177 |
kiplayer
|
9년 전 | 367 | |
| 8176 | 9년 전 | 403 | ||
| 8175 | 9년 전 | 270 | ||
| 8174 | 9년 전 | 282 | ||
| 8173 | 9년 전 | 375 | ||
| 8172 | 9년 전 | 239 | ||
| 8171 | 9년 전 | 219 | ||
| 8170 | 9년 전 | 330 | ||
| 8169 |
커네드커네드
|
9년 전 | 291 | |
| 8168 | 9년 전 | 358 | ||
| 8167 | 9년 전 | 361 | ||
| 8166 | 9년 전 | 272 | ||
| 8165 | 9년 전 | 209 | ||
| 8164 | 9년 전 | 343 | ||
| 8163 | 9년 전 | 329 | ||
| 8162 | 9년 전 | 341 | ||
| 8161 | 9년 전 | 345 | ||
| 8160 |
 성격파탄자 |
9년 전 | 537 | |
| 8159 | 9년 전 | 476 | ||
| 8158 | 9년 전 | 292 | ||
| 8157 | 9년 전 | 416 | ||
| 8156 | 9년 전 | 300 | ||
| 8155 | 9년 전 | 283 | ||
| 8154 |
00년생용띠
|
9년 전 | 632 | |
| 8153 | 9년 전 | 268 | ||
| 8152 |
 닉네임없음 |
9년 전 | 449 | |
| 8151 | 9년 전 | 453 | ||
| 8150 | 9년 전 | 548 | ||
| 8149 |
Jangfolk
|
9년 전 | 389 | |
| 8148 | 9년 전 | 218 | ||
| 8147 | 9년 전 | 420 | ||
| 8146 | 9년 전 | 489 | ||
| 8145 | 9년 전 | 448 | ||
| 8144 | 9년 전 | 406 | ||
| 8143 | 9년 전 | 237 | ||
| 8142 | 9년 전 | 472 | ||
| 8141 | 9년 전 | 417 | ||
| 8140 | 9년 전 | 967 | ||
| 8139 | 9년 전 | 316 | ||
| 8138 |
전갈자리남자
|
9년 전 | 420 | |
| 8137 | 9년 전 | 445 | ||
| 8136 | 9년 전 | 790 | ||
| 8135 |
|
9년 전 | 826 | |
| 8134 |
PlayPixel
|
9년 전 | 558 | |
| 8133 |
 돼지코구뇽 |
9년 전 | 479 | |
| 8132 | 9년 전 | 495 | ||
| 8131 | 9년 전 | 856 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기