이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 230 | 20년 전 | 2089 | ||
| 229 | 20년 전 | 3149 | ||
| 228 | 20년 전 | 3342 | ||
| 227 | 20년 전 | 2417 | ||
| 226 | 20년 전 | 5497 | ||
| 225 | 20년 전 | 2538 | ||
| 224 | 20년 전 | 2981 | ||
| 223 | 20년 전 | 4212 | ||
| 222 | 20년 전 | 2612 | ||
| 221 | 20년 전 | 2302 | ||
| 220 | 20년 전 | 3690 | ||
| 219 | 20년 전 | 2084 | ||
| 218 | 20년 전 | 3587 | ||
| 217 | 20년 전 | 2496 | ||
| 216 | 20년 전 | 2935 | ||
| 215 | 20년 전 | 2245 | ||
| 214 | 20년 전 | 3352 | ||
| 213 | 20년 전 | 2933 | ||
| 212 | 20년 전 | 3073 | ||
| 211 | 20년 전 | 2160 | ||
| 210 | 20년 전 | 1930 | ||
| 209 | 20년 전 | 2383 | ||
| 208 | 20년 전 | 2009 | ||
| 207 | 20년 전 | 1692 | ||
| 206 | 20년 전 | 1866 | ||
| 205 | 20년 전 | 3962 | ||
| 204 | 20년 전 | 1684 | ||
| 203 | 20년 전 | 2025 | ||
| 202 | 20년 전 | 2368 | ||
| 201 | 20년 전 | 1840 | ||
| 200 | 20년 전 | 2972 | ||
| 199 | 20년 전 | 2013 | ||
| 198 | 20년 전 | 2098 | ||
| 197 | 20년 전 | 3669 | ||
| 196 | 20년 전 | 3009 | ||
| 195 | 20년 전 | 2119 | ||
| 194 | 20년 전 | 10271 | ||
| 193 | 20년 전 | 2264 | ||
| 192 | 20년 전 | 1616 | ||
| 191 | 20년 전 | 2680 | ||
| 190 | 20년 전 | 2300 | ||
| 189 | 20년 전 | 1702 | ||
| 188 | 20년 전 | 1504 | ||
| 187 | 20년 전 | 1924 | ||
| 186 | 20년 전 | 1752 | ||
| 185 | 20년 전 | 1795 | ||
| 184 | 20년 전 | 2380 | ||
| 183 | 20년 전 | 1590 | ||
| 182 | 20년 전 | 1498 | ||
| 181 | 20년 전 | 1640 | ||
| 180 | 20년 전 | 2737 | ||
| 179 | 20년 전 | 1825 | ||
| 178 | 20년 전 | 1875 | ||
| 177 | 20년 전 | 2002 | ||
| 176 | 20년 전 | 1812 | ||
| 175 | 20년 전 | 1880 | ||
| 174 | 20년 전 | 1712 | ||
| 173 | 20년 전 | 2071 | ||
| 172 | 20년 전 | 1795 | ||
| 171 | 20년 전 | 2578 | ||
| 170 | 20년 전 | 2297 | ||
| 169 | 20년 전 | 2574 | ||
| 168 | 20년 전 | 1512 | ||
| 167 | 20년 전 | 1599 | ||
| 166 | 20년 전 | 2174 | ||
| 165 | 20년 전 | 1658 | ||
| 164 | 20년 전 | 3792 | ||
| 163 | 20년 전 | 2689 | ||
| 162 | 20년 전 | 2109 | ||
| 161 | 20년 전 | 2819 | ||
| 160 | 20년 전 | 1756 | ||
| 159 | 20년 전 | 1635 | ||
| 158 | 20년 전 | 2587 | ||
| 157 | 20년 전 | 1514 | ||
| 156 | 20년 전 | 1774 | ||
| 155 | 20년 전 | 3249 | ||
| 154 | 20년 전 | 1921 | ||
| 153 | 20년 전 | 1637 | ||
| 152 | 20년 전 | 4974 | ||
| 151 | 20년 전 | 4596 | ||
| 150 | 20년 전 | 3537 | ||
| 149 | 20년 전 | 3816 | ||
| 148 | 20년 전 | 7099 | ||
| 147 | 20년 전 | 3569 | ||
| 146 | 20년 전 | 2647 | ||
| 145 | 20년 전 | 2640 | ||
| 144 | 20년 전 | 7177 | ||
| 143 | 20년 전 | 4623 | ||
| 142 | 20년 전 | 1909 | ||
| 141 | 20년 전 | 3266 | ||
| 140 | 20년 전 | 1986 | ||
| 139 | 20년 전 | 1614 | ||
| 138 | 20년 전 | 2331 | ||
| 137 | 20년 전 | 1805 | ||
| 136 | 20년 전 | 1471 | ||
| 135 | 20년 전 | 1811 | ||
| 134 | 20년 전 | 2989 | ||
| 133 | 20년 전 | 2472 | ||
| 132 | 20년 전 | 1714 | ||
| 131 | 20년 전 | 1666 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기