테스트 사이트 - 개발 중인 베타 버전입니다

웹로봇 배제 표준

방법 1. 웹로봇 배제 표준(Robot Exclusion Standard)에 의한 방법

- 웹로봇의 수집과 검색노출을 원치 않는 경우, 우선 해당 웹페이지가 위치한 최상위 디렉토리에 아래의 내용이 포함된 robots.txt 파일을 저장하시기 바랍니다.
User-Agent:*
Disallow:/

만약 웹로봇이 방문한 이후에 robots.txt 의 로봇배제관련 표준이 적용되었다면, 검색결과에 적용되기까지는 다소 시간이 걸릴 수 있습니다. 자세한 로봇배제에 대한 표준은 www.robotstxt.org 를 통해 알 수 있습니다.

- 특정한 페이지에 대해 웹로봇의 색인이나 링크분석을 막고 싶은 때는 경우에 따라 아래와 같은 메타태그를 HTML 문서의 <HEAD> 부분에 추가하시면 됩니다.

웹페이지를 검색결과에 노출하고 싶지 않을 때
<META NAME="robots" CONTENT="noindex">


웹페이지 내에 포함된 링크를 따르는 수집도 막고 싶을 때 <META NAME="robots" CONTENT="noindex, nofollow"><div class='small'>[이 게시물은 관리자님에 의해 2011-10-31 17:16:08 PHP & HTML에서 이동 됨]</div>

댓글 작성

댓글을 작성하시려면 로그인이 필요합니다.

로그인하기

게시글 목록

번호 제목
12007
12006
12005
12000
11994
11993
11992
11991
11990
11989
29203
11988
11986
11985
11984
11983
11982
29202
29201
24968
11981
29200
29198
11979
11978
11975
11973
11972
11971
11970
11966
11962
29197
29196
11961
11960
11959
JavaScript 간단PHP(1)
11958
11956
11952
11948
11944
11936
11935
29195
11934
29191
11933
29186
11932
11931
11926
11922
29183
11920
11916
11915
11913
11910
29182
11904
11901
11900
29181
11898
29179
11894
11892
11890
11889
11888
11886
11883
11879
11875
29178
29167
11874
29166
11872
11870
11867
11866
11865
29165
29162
11861
11851
11850
11847
11846
11845
11840
11826
11825
11823
11816
11808
11805
11804
JavaScript <script>