이게 가능한 이야기인가요??
불가능할거같은데..;
웹 크롤러와 비슷한 원리인가요?
댓글 10개
11년 전
제가 그렇게하는데요???
11년 전
제가 제작한게 하나있는데
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
php로 제작됬고요..
원리는 간단합니다.
Snoopy Class 나 CURL 로 파싱을 우선합니다.
네이버 카페측에서는 프레임을 이용하니깐 프레임 원본주소을 추출하고
페이지가 1페이지부터 999페이지 까지 파싱이 가능합니다.
전체게시물 보기시 소스보기하면 아이디가 나옵니다. 게시물 닉네임 옆에 그걸 정규식이나 explode로 짤라서 추출합니다.
그리고 뒤에@naver.com 붙이면 끝입니다.
이걸 이용해서 999~1페이지까지 돌아가면서 추출하게 합니다.
크론을 써도되고 안써도되고 딜레이 주기는 1페이지 마다 4초로 하시면될거같구요.
웹 크롤러 랑은 관계가 없는거같구요
위 방법처럼하면 어떤 카페든 추출이 가능합니다.
꼼수을 사용해서 카페api 이용해서 원하는 키워드의 카페을 추출하고
그 카페 고유번호 추출후 모든 카페의 회원 추출이 완료되면 종료하게 할수있습니다.
리아빌리티
11년 전
헐 이게 또 이렇게 하면 될수도 있겠네요..
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
역시 php에선 아직 제가 부족한거 같습니다 ㅠㅠ
좋은 정보 감사합니다!
11년 전
만약에 막히시는 부분있으시면 말씀해주세요^^..
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
php 로 저렇게 해놓고 계속 리플래시 시켜놓으면 하루에 대략 10만개 이상추출가능합니다.
제가 3일간거진 50만개 추출됬더군요
거기서 stmp 지메일로 이메일 대량으로도 뿌리구있구요..
이메일 뿌릴예정이시면 이렇게하셔도 될껍니다.
리아빌리티
11년 전
한번 추출만 해보려구요 ㅋㅋ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
메일을 보내기엔 좀 스팸같은 느낌이 들지 않을까요..;-;
메일 보낼지 말지 여부는 일단 추출을 해보고..
하여튼 좋은 정보 감사합니다ㅎ
11년 전
ㅎㅎ 스팸같은 느낌 아니라 당연히 스팸이죠 ^^
리아빌리티
11년 전
앗 그러네요 ㅋㅋㅋㅋㅋ
11년 전
아... 단순 파싱이었군요..
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
난 대단한 뭔가 있는줄 알고 경이의 눈으로 보고 있었는데..
좋은 정보 감사합니다.
리아빌리티
11년 전
[php]
리아빌리티
11년 전
php
게시판 목록
프로그램
| 번호 | 제목 | 글쓴이 | 날짜 | 조회 |
|---|---|---|---|---|
| 6830 |
112211dd
|
11년 전 | 797 | |
| 6829 |
진짜다진짜가나타남
|
11년 전 | 1219 | |
| 6828 | 11년 전 | 829 | ||
| 6827 |
봉보로봉봉
|
11년 전 | 919 | |
| 6826 |
jinion
|
11년 전 | 831 | |
| 6825 | 11년 전 | 809 | ||
| 6824 |
yunkiri486
|
11년 전 | 730 | |
| 6823 |
2donggalbi
|
11년 전 | 859 | |
| 6822 | 11년 전 | 860 | ||
| 6821 | 11년 전 | 805 | ||
| 6820 | 11년 전 | 3112 | ||
| 6819 | 11년 전 | 1261 | ||
| 6818 | 11년 전 | 520 | ||
| 6817 |
 별을따는소년 |
11년 전 | 618 | |
| 6816 | 11년 전 | 2086 | ||
| 6815 | 11년 전 | 1220 | ||
| 6814 | 11년 전 | 872 | ||
| 6813 | 11년 전 | 621 | ||
| 6812 |
 Terrorboy |
11년 전 | 990 | |
| 6811 | 11년 전 | 593 | ||
| 6810 | 11년 전 | 1546 | ||
| 6809 |
낚시가좋아
|
11년 전 | 1052 | |
| 6808 | 11년 전 | 449 | ||
| 6807 | 11년 전 | 780 | ||
| 6806 |
Unhappy
|
11년 전 | 1782 | |
| 6805 | 11년 전 | 1619 | ||
| 6804 | 11년 전 | 1137 | ||
| 6803 | 11년 전 | 579 | ||
| 6802 |
asdfg
|
11년 전 | 1149 | |
| 6801 |
아트귀농인
|
11년 전 | 511 | |
| 6800 | 11년 전 | 2566 | ||
| 6799 | 11년 전 | 1361 | ||
| 6798 | 11년 전 | 1477 | ||
| 6797 | 11년 전 | 633 | ||
| 6796 |
purple63
|
11년 전 | 435 | |
| 6795 | 11년 전 | 2641 | ||
| 6794 |
커네드커네드
|
11년 전 | 964 | |
| 6793 | 11년 전 | 415 | ||
| 6792 | 11년 전 | 2505 | ||
| 6791 | 11년 전 | 533 | ||
| 6790 | 11년 전 | 2267 | ||
| 6789 |
리아빌리티
|
11년 전 | 3107 | |
| 6788 | 11년 전 | 1348 | ||
| 6787 | 11년 전 | 684 | ||
| 6786 | 11년 전 | 394 | ||
| 6785 | 11년 전 | 725 | ||
| 6784 |
Terrorboy |
11년 전 | 854 | |
| 6783 | 11년 전 | 592 | ||
| 6782 | 11년 전 | 3659 | ||
| 6781 |
리아빌리티
|
11년 전 | 499 | |
| 6780 | 11년 전 | 542 | ||
| 6779 | 11년 전 | 494 | ||
| 6778 | 11년 전 | 4704 | ||
| 6777 |
바보온달123
|
11년 전 | 625 | |
| 6776 | 11년 전 | 936 | ||
| 6775 | 11년 전 | 738 | ||
| 6774 |
DANet
|
11년 전 | 647 | |
| 6773 | 11년 전 | 1562 | ||
| 6772 | 11년 전 | 1366 | ||
| 6771 | 11년 전 | 623 | ||
| 6770 | 11년 전 | 1163 | ||
| 6769 | 11년 전 | 961 | ||
| 6768 | 11년 전 | 696 | ||
| 6767 | 11년 전 | 591 | ||
| 6766 | 11년 전 | 1272 | ||
| 6765 |
크림나이트
|
11년 전 | 1006 | |
| 6764 | 11년 전 | 1558 | ||
| 6763 | 11년 전 | 2614 | ||
| 6762 | 11년 전 | 545 | ||
| 6761 |
Terrorboy |
11년 전 | 794 | |
| 6760 |
Terrorboy |
11년 전 | 721 | |
| 6759 | 11년 전 | 3354 | ||
| 6758 | 11년 전 | 1014 | ||
| 6757 | 11년 전 | 1276 | ||
| 6756 | 11년 전 | 898 | ||
| 6755 |
Terrorboy |
11년 전 | 576 | |
| 6754 |
Terrorboy |
11년 전 | 725 | |
| 6753 |
Terrorboy |
11년 전 | 1396 | |
| 6752 | 11년 전 | 613 | ||
| 6751 |
Terrorboy |
11년 전 | 656 | |
| 6750 |
Terrorboy |
11년 전 | 2031 | |
| 6749 | 11년 전 | 1222 | ||
| 6748 |
 HackYa |
11년 전 | 1126 | |
| 6747 | 11년 전 | 1177 | ||
| 6746 | 11년 전 | 842 | ||
| 6745 |
Terrorboy |
11년 전 | 917 | |
| 6744 | 11년 전 | 857 | ||
| 6743 | 11년 전 | 1298 | ||
| 6742 | 11년 전 | 542 | ||
| 6741 |
Abilityarch
|
11년 전 | 613 | |
| 6740 | 11년 전 | 662 | ||
| 6739 |
leewin20
|
11년 전 | 1242 | |
| 6738 | 11년 전 | 513 | ||
| 6737 | 11년 전 | 1221 | ||
| 6736 | 11년 전 | 1263 | ||
| 6735 | 11년 전 | 557 | ||
| 6734 | 11년 전 | 1291 | ||
| 6733 |
RipperTNT
|
11년 전 | 1847 | |
| 6732 |
Terrorboy |
11년 전 | 1341 | |
| 6731 |
Terrorboy |
11년 전 | 1399 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기