이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 6930 |
SOFTA
|
11년 전 | 5982 | |
| 6929 |
 LaRuota |
11년 전 | 1591 | |
| 6928 | 11년 전 | 1755 | ||
| 6927 | 11년 전 | 1777 | ||
| 6926 | 11년 전 | 1881 | ||
| 6925 | 11년 전 | 2271 | ||
| 6924 | 11년 전 | 3870 | ||
| 6923 | 11년 전 | 2265 | ||
| 6922 |
level999
|
11년 전 | 1038 | |
| 6921 | 11년 전 | 819 | ||
| 6920 | 11년 전 | 953 | ||
| 6919 | 11년 전 | 1067 | ||
| 6918 | 11년 전 | 1311 | ||
| 6917 | 11년 전 | 15427 | ||
| 6916 | 11년 전 | 1426 | ||
| 6915 | 11년 전 | 581 | ||
| 6914 | 11년 전 | 614 | ||
| 6913 | 11년 전 | 875 | ||
| 6912 | 11년 전 | 3125 | ||
| 6911 |
사랑해요79
|
11년 전 | 964 | |
| 6910 | 11년 전 | 743 | ||
| 6909 | 11년 전 | 780 | ||
| 6908 | 11년 전 | 643 | ||
| 6907 | 11년 전 | 832 | ||
| 6906 | 11년 전 | 1586 | ||
| 6905 | 11년 전 | 566 | ||
| 6904 | 11년 전 | 1003 | ||
| 6903 | 11년 전 | 1676 | ||
| 6902 |
2donggalbi
|
11년 전 | 513 | |
| 6901 | 11년 전 | 1390 | ||
| 6900 | 11년 전 | 719 | ||
| 6899 | 11년 전 | 860 | ||
| 6898 |
열라뽕똬이
|
11년 전 | 1309 | |
| 6897 |
this1mg
|
11년 전 | 1608 | |
| 6896 |
sbdossb
|
11년 전 | 574 | |
| 6895 |
봉보로봉봉
|
11년 전 | 1150 | |
| 6894 |
똘똘이스머츠
|
11년 전 | 494 | |
| 6893 |
네이비컬러
|
11년 전 | 3638 | |
| 6892 | 11년 전 | 1076 | ||
| 6891 |
네이비컬러
|
11년 전 | 1318 | |
| 6890 | 11년 전 | 1140 | ||
| 6889 | 11년 전 | 585 | ||
| 6888 | 11년 전 | 723 | ||
| 6887 | 11년 전 | 615 | ||
| 6886 | 11년 전 | 5057 | ||
| 6885 | 11년 전 | 554 | ||
| 6884 |
asfasdfd235
|
11년 전 | 579 | |
| 6883 | 11년 전 | 3036 | ||
| 6882 | 11년 전 | 917 | ||
| 6881 | 11년 전 | 4427 | ||
| 6880 | 11년 전 | 1813 | ||
| 6879 |
퍼블리셔지노군
|
11년 전 | 2627 | |
| 6878 | 11년 전 | 558 | ||
| 6877 | 11년 전 | 577 | ||
| 6876 | 11년 전 | 1445 | ||
| 6875 | 11년 전 | 629 | ||
| 6874 | 11년 전 | 1600 | ||
| 6873 | 11년 전 | 1597 | ||
| 6872 | 11년 전 | 4458 | ||
| 6871 |
Abilityarch
|
11년 전 | 962 | |
| 6870 | 11년 전 | 2128 | ||
| 6869 | 11년 전 | 1407 | ||
| 6868 | 11년 전 | 1451 | ||
| 6867 | 11년 전 | 1523 | ||
| 6866 | 11년 전 | 742 | ||
| 6865 | 11년 전 | 1614 | ||
| 6864 | 11년 전 | 469 | ||
| 6863 | 11년 전 | 3750 | ||
| 6862 | 11년 전 | 1848 | ||
| 6861 | 11년 전 | 1644 | ||
| 6860 | 11년 전 | 1296 | ||
| 6859 |
cityman
|
11년 전 | 6812 | |
| 6858 | 11년 전 | 1268 | ||
| 6857 |
의정부아줌마
|
11년 전 | 865 | |
| 6856 | 11년 전 | 2370 | ||
| 6855 | 11년 전 | 1698 | ||
| 6854 | 11년 전 | 828 | ||
| 6853 | 11년 전 | 1209 | ||
| 6852 | 11년 전 | 2595 | ||
| 6851 | 11년 전 | 1963 | ||
| 6850 | 11년 전 | 1790 | ||
| 6849 | 11년 전 | 2081 | ||
| 6848 | 11년 전 | 2360 | ||
| 6847 | 11년 전 | 3135 | ||
| 6846 | 11년 전 | 2717 | ||
| 6845 | 11년 전 | 2799 | ||
| 6844 | 11년 전 | 3523 | ||
| 6843 | 11년 전 | 3264 | ||
| 6842 |
아트291
|
11년 전 | 694 | |
| 6841 | 11년 전 | 4170 | ||
| 6840 | 11년 전 | 5183 | ||
| 6839 | 11년 전 | 891 | ||
| 6838 |
 iwebstory |
11년 전 | 2094 | |
| 6837 | 11년 전 | 1278 | ||
| 6836 |
netdf
|
11년 전 | 610 | |
| 6835 |
 Terrorboy |
11년 전 | 1007 | |
| 6834 | 11년 전 | 671 | ||
| 6833 |
LaRuota |
11년 전 | 2686 | |
| 6832 |
울산굿모닝
|
11년 전 | 1658 | |
| 6831 |
Terrorboy |
11년 전 | 667 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기