트위터 @sitehis Sitehis.com (SiteN.kr + SiteH.kr) 시작페이지로 | 검색공급자추가 | 즐겨찾기추가 | Bookmark and Share
  Sitehis  
사이트보도자료사이트히스토리사이트커뮤니티도메인/호스팅홈페이지제작웹유지보수홈페이지몰솔루션몰디자인몰이벤트제휴몰마이페이지
  스타이동?
아이디
비밀번호
Twitter로그인 | @sitehis
회원가입 | 아이디/비밀번호 찾기
  로그인  
  공지사항  
  회원가입  
  이용약관  
  개인정보보호정책  
  사이트캡쳐 삭제신청  
     
상담신청하기
 Sitehis FAQ >
제목

robots.txt http://sitehis.com/db_faq_3

작성자 박선민 작성일 2009-10-16 조회 1282

사이트캡쳐를 원하지 않는다면,
/robots.txt 파일을 만들고 다음을 삽입하세요

User-agent: *
Disallow: /

혹은

User-agent: sitehis_capture
Disallow: /

반대로, 다른 로봇은 거부하면서, 사이트캡쳐를 허락하신다면
/robots.txt 파일을 만들고 다음을 삽입하세요

User-agent: sitehis_capture
Disallow:

혹은

User-agent: sitehis_capture
allow: /

To exclude all robots, the robots.txt file should look like this:

User-agent: *
Disallow: /

To exclude just one directory (and its subdirectories), say, the /images/ directory, the file should look like this:

User-agent: *
Disallow: /images/

Web site administrators can allow or disallow specific robots from visiting part or all of their site. Alexa's crawler identifies itself as ia_archiver, and so to allow ia_archiver to visit (while preventing all others), your robots.txt file should look like this:

User-agent: ia_archiver
Disallow:

To prevent ia_archiver from visiting (while allowing all others), your robots.txt file should look like this:

User-agent: ia_archiver
Disallow: /

For more information regarding robots, crawling, and robots.txt visit the Web Robots Pages at www.robotstxt.org, an excellent source for the latest information on the Standard for Robots Exclusion.




좋은글은 아낌없이 스크랩을^^ 유명해지게^^ 행복해지게^^
   
Facebook페이스북스크랩   구글북마크  


- RSS 구독하기
     
믹시

- 퍼가실 경우에는 각 게시물 출처를 확인하시고 출처를 남겨주세요
- 게시물들은 신문기사와 달리 사실보다 의견 중심일 것입니다.
- 사실이 아니거나 본인 의견과 다르면 댓글로 수정하여 주세요.

이전글 이전 게시물이 없습니다.
다음글 다음 게시물이 없습니다.
      
 
진행중인 이벤트가 없습니다.
  ㆍ 뉴21커뮤니티(주) 신주.....
  ㆍ 2016년도 이사회 및 정.....
  ㆍ 뉴21커뮤니티(주) 유상.....
  ㆍ 2015년도 이사회 및 정.....
  ㆍ 뉴21커뮤니티(주) 유상.....
  ㆍ 2014년도 이사회 및 정.....
  ㆍ (보도자료) 전남오픈마.....
  ㆍ 2013년도 이사회 및 정.....
  ㆍ 대학생 창업 11년, 유.....
  ㆍ Sitehis.com = SiteN.k.....
sitehis.com intro
sitehis.com price
sitehis.com copyright