테스트 사이트 - 개발 중인 베타 버전입니다

SIR

로그인 회원가입

목록으로

이전글 다음글

rss 검색봇만 접근 가능하게 할수있나요? 채택완료

razogol 6년 전 조회 1,883

목록

네이버 수집용으로 rss를 열어 놓았는데

다른 사이트에서 봇으로 계속 긁어 가네요...

#그누보드5

댓글을 작성하려면 로그인이 필요합니다.

답변 1개

정렬:

천사별

6년 전

User-agent: Cowbot Disallow:

User-agent: * Disallow: /

참고: http://bklove.info/robotstxt-%EB%A7%8C%EB%93%A4%EA%B8%B0/

로그인 후 평가할 수 있습니다

댓글을 작성하려면 로그인이 필요합니다.

답변을 작성하려면 로그인이 필요합니다.