이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 6130 |
gender
|
12년 전 | 1092 | |
| 6129 | 12년 전 | 1322 | ||
| 6128 |
 미스티아이드 |
12년 전 | 3462 | |
| 6127 | 12년 전 | 695 | ||
| 6126 |
미스티아이드 |
12년 전 | 2208 | |
| 6125 |
 라이브러리 |
12년 전 | 4884 | |
| 6124 | 12년 전 | 660 | ||
| 6123 | 12년 전 | 3843 | ||
| 6122 | 12년 전 | 1017 | ||
| 6121 | 12년 전 | 3751 | ||
| 6120 | 12년 전 | 908 | ||
| 6119 | 12년 전 | 1770 | ||
| 6118 | 12년 전 | 929 | ||
| 6117 | 12년 전 | 2149 | ||
| 6116 | 12년 전 | 7942 | ||
| 6115 | 12년 전 | 1919 | ||
| 6114 |
 Faceissue |
12년 전 | 1705 | |
| 6113 | 12년 전 | 1522 | ||
| 6112 | 12년 전 | 594 | ||
| 6111 | 12년 전 | 2111 | ||
| 6110 | 12년 전 | 1850 | ||
| 6109 | 12년 전 | 640 | ||
| 6108 | 12년 전 | 1198 | ||
| 6107 | 12년 전 | 623 | ||
| 6106 | 12년 전 | 904 | ||
| 6105 | 12년 전 | 1191 | ||
| 6104 | 12년 전 | 3595 | ||
| 6103 | 12년 전 | 2122 | ||
| 6102 | 12년 전 | 2315 | ||
| 6101 | 12년 전 | 3677 | ||
| 6100 | 12년 전 | 3483 | ||
| 6099 | 12년 전 | 3152 | ||
| 6098 | 12년 전 | 4024 | ||
| 6097 | 12년 전 | 1015 | ||
| 6096 | 12년 전 | 5982 | ||
| 6095 | 12년 전 | 1369 | ||
| 6094 | 12년 전 | 1224 | ||
| 6093 | 12년 전 | 3406 | ||
| 6092 | 12년 전 | 3053 | ||
| 6091 | 12년 전 | 5195 | ||
| 6090 | 12년 전 | 2703 | ||
| 6089 | 12년 전 | 3326 | ||
| 6088 | 12년 전 | 1016 | ||
| 6087 | 12년 전 | 847 | ||
| 6086 | 12년 전 | 2018 | ||
| 6085 |
 늘푸른등불 |
12년 전 | 806 | |
| 6084 |
웹디자인되고파
|
12년 전 | 2216 | |
| 6083 | 12년 전 | 1508 | ||
| 6082 | 12년 전 | 1111 | ||
| 6081 | 12년 전 | 2099 | ||
| 6080 |
Stiven
|
12년 전 | 2312 | |
| 6079 |
프로프리랜서
|
12년 전 | 1319 | |
| 6078 |
프로프리랜서
|
12년 전 | 786 | |
| 6077 |
프로프리랜서
|
12년 전 | 1342 | |
| 6076 |
프로프리랜서
|
12년 전 | 830 | |
| 6075 |
프로프리랜서
|
12년 전 | 1223 | |
| 6074 | 12년 전 | 3854 | ||
| 6073 | 12년 전 | 3949 | ||
| 6072 | 12년 전 | 1376 | ||
| 6071 | 12년 전 | 6992 | ||
| 6070 | 12년 전 | 7574 | ||
| 6069 | 12년 전 | 2320 | ||
| 6068 | 12년 전 | 3868 | ||
| 6067 |
smwkd
|
12년 전 | 632 | |
| 6066 | 12년 전 | 3656 | ||
| 6065 | 12년 전 | 3486 | ||
| 6064 | 12년 전 | 2720 | ||
| 6063 | 12년 전 | 2840 | ||
| 6062 | 12년 전 | 2371 | ||
| 6061 | 12년 전 | 2277 | ||
| 6060 | 12년 전 | 5184 | ||
| 6059 | 12년 전 | 2814 | ||
| 6058 | 12년 전 | 3134 | ||
| 6057 | 12년 전 | 2261 | ||
| 6056 | 12년 전 | 6841 | ||
| 6055 | 12년 전 | 2581 | ||
| 6054 | 12년 전 | 3435 | ||
| 6053 | 12년 전 | 2328 | ||
| 6052 | 12년 전 | 4820 | ||
| 6051 | 12년 전 | 3712 | ||
| 6050 | 12년 전 | 2555 | ||
| 6049 | 12년 전 | 2245 | ||
| 6048 |
 Rockg |
12년 전 | 1297 | |
| 6047 | 12년 전 | 3441 | ||
| 6046 | 12년 전 | 4095 | ||
| 6045 | 12년 전 | 3455 | ||
| 6044 | 12년 전 | 5331 | ||
| 6043 | 12년 전 | 1651 | ||
| 6042 | 12년 전 | 1282 | ||
| 6041 | 12년 전 | 5165 | ||
| 6040 | 12년 전 | 939 | ||
| 6039 | 12년 전 | 3412 | ||
| 6038 | 12년 전 | 3413 | ||
| 6037 | 12년 전 | 2992 | ||
| 6036 | 12년 전 | 3341 | ||
| 6035 | 12년 전 | 2867 | ||
| 6034 | 12년 전 | 2845 | ||
| 6033 | 12년 전 | 2867 | ||
| 6032 | 12년 전 | 2854 | ||
| 6031 | 12년 전 | 2880 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기