이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 6730 |
 Terrorboy |
11년 전 | 1108 | |
| 6729 | 11년 전 | 564 | ||
| 6728 |
Terrorboy |
11년 전 | 579 | |
| 6727 | 11년 전 | 2424 | ||
| 6726 | 11년 전 | 598 | ||
| 6725 |
네모웹에이전시
|
11년 전 | 438 | |
| 6724 |
네모웹에이전시
|
11년 전 | 884 | |
| 6723 | 11년 전 | 1020 | ||
| 6722 | 11년 전 | 961 | ||
| 6721 | 11년 전 | 647 | ||
| 6720 | 11년 전 | 1977 | ||
| 6719 | 11년 전 | 2199 | ||
| 6718 | 11년 전 | 1101 | ||
| 6717 |
 홈피공장장 |
11년 전 | 655 | |
| 6716 | 11년 전 | 2311 | ||
| 6715 | 11년 전 | 7580 | ||
| 6714 | 11년 전 | 2047 | ||
| 6713 | 11년 전 | 781 | ||
| 6712 |
geektoo
|
11년 전 | 1157 | |
| 6711 | 11년 전 | 897 | ||
| 6710 |
sirzzang
|
11년 전 | 2129 | |
| 6709 |
bewitched
|
11년 전 | 1801 | |
| 6708 |
levin
|
11년 전 | 569 | |
| 6707 | 11년 전 | 768 | ||
| 6706 | 11년 전 | 1793 | ||
| 6705 | 11년 전 | 991 | ||
| 6704 |
Terrorboy |
11년 전 | 753 | |
| 6703 | 11년 전 | 416 | ||
| 6702 | 11년 전 | 1100 | ||
| 6701 | 11년 전 | 804 | ||
| 6700 | 11년 전 | 1721 | ||
| 6699 | 11년 전 | 716 | ||
| 6698 |
이박사친구
|
11년 전 | 730 | |
| 6697 | 11년 전 | 1218 | ||
| 6696 | 11년 전 | 620 | ||
| 6695 |
Header
|
11년 전 | 706 | |
| 6694 | 11년 전 | 1163 | ||
| 6693 |
Terrorboy |
11년 전 | 1113 | |
| 6692 | 11년 전 | 1150 | ||
| 6691 | 11년 전 | 1288 | ||
| 6690 |
Terrorboy |
11년 전 | 715 | |
| 6689 | 11년 전 | 896 | ||
| 6688 | 11년 전 | 935 | ||
| 6687 | 11년 전 | 533 | ||
| 6686 |
RGB255
|
11년 전 | 964 | |
| 6685 |
Terrorboy |
11년 전 | 640 | |
| 6684 | 11년 전 | 717 | ||
| 6683 | 11년 전 | 386 | ||
| 6682 | 11년 전 | 1129 | ||
| 6681 | 11년 전 | 1419 | ||
| 6680 | 11년 전 | 450 | ||
| 6679 |
RGB255
|
11년 전 | 396 | |
| 6678 | 11년 전 | 1350 | ||
| 6677 |
Terrorboy |
11년 전 | 439 | |
| 6676 | 11년 전 | 1015 | ||
| 6675 |
디자이너필이
|
11년 전 | 824 | |
| 6674 | 11년 전 | 1242 | ||
| 6673 | 11년 전 | 1314 | ||
| 6672 | 11년 전 | 6029 | ||
| 6671 | 11년 전 | 1339 | ||
| 6670 |
하프의정령
|
11년 전 | 570 | |
| 6669 | 11년 전 | 413 | ||
| 6668 |
공부하고가겠슴다
|
11년 전 | 448 | |
| 6667 |
하프의정령
|
11년 전 | 548 | |
| 6666 | 11년 전 | 787 | ||
| 6665 | 11년 전 | 1412 | ||
| 6664 | 11년 전 | 928 | ||
| 6663 | 11년 전 | 1153 | ||
| 6662 | 11년 전 | 411 | ||
| 6661 |
basketball
|
11년 전 | 507 | |
| 6660 | 11년 전 | 2508 | ||
| 6659 | 12년 전 | 1611 | ||
| 6658 |
Terrorboy |
12년 전 | 1332 | |
| 6657 |
Terrorboy |
12년 전 | 3158 | |
| 6656 | 12년 전 | 566 | ||
| 6655 |
프로프리랜서
|
12년 전 | 2333 | |
| 6654 |
프로프리랜서
|
12년 전 | 1911 | |
| 6653 |
프로프리랜서
|
12년 전 | 1745 | |
| 6652 |
프로프리랜서
|
12년 전 | 1830 | |
| 6651 |
 FM2fmedia |
12년 전 | 783 | |
| 6650 | 12년 전 | 1317 | ||
| 6649 | 12년 전 | 1318 | ||
| 6648 | 12년 전 | 811 | ||
| 6647 | 12년 전 | 3161 | ||
| 6646 | 12년 전 | 469 | ||
| 6645 | 12년 전 | 966 | ||
| 6644 |
BBAYOUNG
|
12년 전 | 1377 | |
| 6643 | 12년 전 | 1793 | ||
| 6642 | 12년 전 | 643 | ||
| 6641 | 12년 전 | 1333 | ||
| 6640 | 12년 전 | 706 | ||
| 6639 | 12년 전 | 2320 | ||
| 6638 |
jasmin2
|
12년 전 | 751 | |
| 6637 |
geektoo
|
12년 전 | 444 | |
| 6636 | 12년 전 | 667 | ||
| 6635 |
프로프리랜서
|
12년 전 | 2235 | |
| 6634 |
프로프리랜서
|
12년 전 | 1740 | |
| 6633 |
프로프리랜서
|
12년 전 | 4060 | |
| 6632 |
프로프리랜서
|
12년 전 | 1347 | |
| 6631 |
프로프리랜서
|
12년 전 | 1782 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기