웹 소스 긁어오기
<?
function open_url($url)
{
if (preg_match('/^(https?)\:\/\/([^\/]+)(.*)/', $url, $pregs))
{
$host = $pregs[2];
$port = ($pregs[1] == 'http' ? 80 : 443);
$suburl = $pregs[3];
if (!$suburl) $suburl = '/';
if ($fp = fsockopen($host, $port, $errno, $errstr, 10))
{
fputs($fp, "GET {$suburl} HTTP/1.0\r\n");
fputs($fp, "Host: {$host}\r\n");
fputs($fp, "User-Agnet: Mozilla/4.0 (compatible; MSIE 8.0; Windows NT 5.1)\r\n");
fputs($fp, "\r\n");
while (!feof($fp))
{
// $temp .= iconv('UTF-8', 'CP949', fgets($fp, 512)); // UTF-8
$temp .= fgets($fp, 512);
}
fclose($fp);
$arr = explode("\r\n\r\n", $temp, 2);
if (count($arr) < 2) return;
return array(
'header'=>$arr[0],
'body'=>$arr[1]
);
}
}
}
print_r(open_url('http://sir.co.kr/'));
?>
댓글 14개
13년 전
크롤러인가요?
13년 전
사람을 지칭하시는건가요 아니면 기능의 역할을 지칭하시는건가요? ㅎㅎ
13년 전
올려두고 물어보신다면 ;;
구글에서 크롤러를 검색해보세요 :)
기능이 비슷한지 해서 물어본 내용입니다.
구글에서 크롤러를 검색해보세요 :)
기능이 비슷한지 해서 물어본 내용입니다.
13년 전
기능은 웹사이트 코드를 긁어오는 것이니 당연히 비슷하죠.
이 코드를 수정해서 크롤러로 사용이 가능할수도 있겠지만, 저는 그런 의도로 올린건 아닙니다.
그리고 '크롤러'라고 하셔서 '크롤링 하는 사람'을 지칭하셨던 것인지
'크롤러 기능'을 지칭한 것인지를 여쭌것이지요 :D
이 코드를 수정해서 크롤러로 사용이 가능할수도 있겠지만, 저는 그런 의도로 올린건 아닙니다.
그리고 '크롤러'라고 하셔서 '크롤링 하는 사람'을 지칭하셨던 것인지
'크롤러 기능'을 지칭한 것인지를 여쭌것이지요 :D
13년 전
어떻게 사용하는건가요~?
13년 전
제가 만든 open_url 함수를 추가하시고 호출하시면 됩니다.
반환값은 긁어오기에 성공하면 header와 body를 인덱스로 갖는 배열이 반환되고, 실패시엔 아무것도 반환되지 않습니다.
header 에는 http 헤더가, body에는 http 내용이 들어갑니다
반환값은 긁어오기에 성공하면 header와 body를 인덱스로 갖는 배열이 반환되고, 실패시엔 아무것도 반환되지 않습니다.
header 에는 http 헤더가, body에는 http 내용이 들어갑니다
13년 전
때론 유용하게 사용되겠네요 ^^
13년 전
감사합니다~ ^^
프로프리랜서
13년 전
소스만 가지고오는
13년 전
네 웹소스 긁어오는 프로그램입니다 ^^
13년 전
파싱이..스누피도 있고..^^;;
중요한건 소스를 어떻게 컨트롤하느냐겠지요ㅎㅎㅎ
태그 날리는것도 한몫할것이고..
한마디로 정규식을 배워야 요것을 매우 유용하게 사용할수있을것이다..이런거지요
중요한건 소스를 어떻게 컨트롤하느냐겠지요ㅎㅎㅎ
태그 날리는것도 한몫할것이고..
한마디로 정규식을 배워야 요것을 매우 유용하게 사용할수있을것이다..이런거지요
13년 전
맞는 말씀이지요 ㅎㅎ
12년 전
좋은 소스네요 ㅋㅋ
takumi22
12년 전
유용한 정보 감사합니다
게시글 목록
| 번호 | 제목 |
|---|---|
| 9865 | |
| 9857 | |
| 9854 |
JavaScript
자바스크립트 메소드 관련..
2
|
| 17539 | |
| 9853 | |
| 9851 |
JavaScript
클릭하면 레이어로 메뉴영역 올라오는거요~~
1
|
| 17538 | |
| 9850 | |
| 9847 |
기타
쇼핑몰을 구축하려면
2
|
| 9846 | |
| 9844 |
PHP
라이브러리를 만들어서
1
|
| 9842 |
Flash
플래시 작업소스가 없는데
1
|
| 9840 |
MySQL
mysql 커뮤니티 버젼을 사용해서
1
|
| 9838 | |
| 9836 |
JavaScript
flash의 많은 기능들을
1
|
| 19876 |
HTML
php로 사이트 개발시
3
|
| 9833 |
Linux
그누4 에서 메일발송을 사용하려면
2
|
| 9832 |
jQuery
상용 그리드에 버금가는
|
| 9829 |
정규표현식
운전면허번호도
2
|
| 9826 |
node.js
node.js 활용사례 좀..
2
|
| 19872 | |
| 9824 |
Mobile
jquery mobile 커스터마이징...
1
|
| 9823 |
PHP
프레임웍 보다는...
|
| 9820 | |
| 17537 |
댓글 작성
댓글을 작성하시려면 로그인이 필요합니다.
로그인하기