이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 330 |
prosper
|
20년 전 | 2287 | |
| 329 |
prosper
|
20년 전 | 1917 | |
| 328 |
prosper
|
20년 전 | 1711 | |
| 327 | 20년 전 | 3777 | ||
| 326 | 20년 전 | 4865 | ||
| 325 |
hwatta
|
20년 전 | 2493 | |
| 324 |
 hanpedro |
20년 전 | 3150 | |
| 323 | 20년 전 | 5875 | ||
| 322 |
hwatta
|
20년 전 | 2856 | |
| 321 |
hwatta
|
20년 전 | 2331 | |
| 320 |
yesmoa
|
20년 전 | 4581 | |
| 319 | 20년 전 | 2695 | ||
| 318 | 20년 전 | 2244 | ||
| 317 |
kyodon
|
20년 전 | 2765 | |
| 316 | 20년 전 | 2588 | ||
| 315 |
hanpedro |
20년 전 | 2890 | |
| 314 |
hanpedro |
20년 전 | 3347 | |
| 313 |
 damoa.biz |
20년 전 | 2653 | |
| 312 |
yesmoa
|
20년 전 | 4730 | |
| 311 | 20년 전 | 3287 | ||
| 310 |
홀로남은자
|
20년 전 | 4574 | |
| 309 | 20년 전 | 3011 | ||
| 308 | 20년 전 | 4145 | ||
| 307 | 20년 전 | 4380 | ||
| 306 | 20년 전 | 7043 | ||
| 305 | 20년 전 | 3877 | ||
| 304 | 20년 전 | 2776 | ||
| 303 |
크리스탈처럼
|
20년 전 | 4415 | |
| 302 | 20년 전 | 2215 | ||
| 301 |
 수다쟁이오도리씨 |
20년 전 | 4332 | |
| 300 | 20년 전 | 3819 | ||
| 299 | 20년 전 | 2636 | ||
| 298 | 20년 전 | 4846 | ||
| 297 |
 bbking |
20년 전 | 2536 | |
| 296 | 20년 전 | 4541 | ||
| 295 | 20년 전 | 3573 | ||
| 294 | 20년 전 | 3597 | ||
| 293 | 20년 전 | 3824 | ||
| 292 | 20년 전 | 3220 | ||
| 291 |
yesmoa
|
20년 전 | 5960 | |
| 290 | 20년 전 | 2948 | ||
| 289 | 20년 전 | 5870 | ||
| 288 |
bbking |
20년 전 | 2385 | |
| 287 |
bbking |
20년 전 | 1818 | |
| 286 |
bbking |
20년 전 | 2157 | |
| 285 |
bbking |
20년 전 | 3547 | |
| 284 |
bbking |
20년 전 | 2043 | |
| 283 |
bbking |
20년 전 | 4406 | |
| 282 | 20년 전 | 3386 | ||
| 281 |
bbking |
20년 전 | 2218 | |
| 280 |
bbking |
20년 전 | 7817 | |
| 279 | 20년 전 | 5567 | ||
| 278 | 20년 전 | 3003 | ||
| 277 |
hanpedro |
20년 전 | 5577 | |
| 276 | 20년 전 | 2367 | ||
| 275 | 20년 전 | 2623 | ||
| 274 | 20년 전 | 2404 | ||
| 273 | 20년 전 | 2238 | ||
| 272 | 20년 전 | 2164 | ||
| 271 | 20년 전 | 2626 | ||
| 270 | 20년 전 | 2675 | ||
| 269 | 20년 전 | 2517 | ||
| 268 | 20년 전 | 2700 | ||
| 267 | 20년 전 | 2383 | ||
| 266 | 20년 전 | 2576 | ||
| 265 | 20년 전 | 3517 | ||
| 264 |
bbking |
20년 전 | 5380 | |
| 263 |
hanpedro |
20년 전 | 3742 | |
| 262 | 20년 전 | 3202 | ||
| 261 |
허저비
|
20년 전 | 5947 | |
| 260 |
bbking |
20년 전 | 5724 | |
| 259 | 20년 전 | 4149 | ||
| 258 | 20년 전 | 2384 | ||
| 257 | 20년 전 | 3206 | ||
| 256 | 20년 전 | 1918 | ||
| 255 | 20년 전 | 1587 | ||
| 254 | 20년 전 | 3159 | ||
| 253 | 20년 전 | 3551 | ||
| 252 | 20년 전 | 5136 | ||
| 251 | 20년 전 | 5829 | ||
| 250 | 20년 전 | 3687 | ||
| 249 | 20년 전 | 5033 | ||
| 248 | 20년 전 | 3303 | ||
| 247 | 20년 전 | 3659 | ||
| 246 |
bbking |
20년 전 | 7966 | |
| 245 |
bbking |
20년 전 | 5928 | |
| 244 | 20년 전 | 4498 | ||
| 243 |
hanpedro |
20년 전 | 4077 | |
| 242 | 20년 전 | 2808 | ||
| 241 | 20년 전 | 2754 | ||
| 240 | 20년 전 | 2390 | ||
| 239 | 20년 전 | 1679 | ||
| 238 |
아우겐나이스
|
20년 전 | 2285 | |
| 237 |
email
|
20년 전 | 3700 | |
| 236 | 20년 전 | 4183 | ||
| 235 | 20년 전 | 10476 | ||
| 234 | 20년 전 | 5084 | ||
| 233 | 20년 전 | 3387 | ||
| 232 | 20년 전 | 3229 | ||
| 231 | 20년 전 | 3871 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기