robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 53 / 57 pages

	제목		날짜
59	미니위니 플래시 뮤직박스 0.1	4059	2008/08/01
58	[브라우저] 오페라 브라우저 사용시 변경할 사항	10726	2008/07/31
57	오토셋 관련 팁	4575	2008/07/31
56	동영상 다운로드	4310	2008/07/29
55	[윈도우] 파일삭제 확인을 뜨지 않게 하기	11416	2007/11/25
54	디퓨젼 디더(Diffusion Dither) 사용을 이해하기	6559	2007/11/25
53	무료 FTP 사이트	29821	2007/11/20
52	개인도메인 활용하기 (작성 중)	5396	2007/10/05
51	[브라우저] 파이어폭스 팁입니다.	12590	2007/10/04
50	구글 어플리케이션으로 자신이 소유한 도메인의 메일주소 사용하기	6097	2007/10/03
49	네이버 오픈API 책검색	6784	2007/09/17
48	[기타] 네이버 카페 자료 백업을 위한 프로그램 - 까네 2.0 (GPL 라이센스 버전)	12009	2007/09/17