robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 50 / 57 pages

	제목		날짜
95	[생활] 면티 세탁 시 목이 안 늘어지게 하는 방법	11387	2004/05/11
94	[윈도우] 파일삭제 확인을 뜨지 않게 하기	11416	2007/11/25
93	[윈도우] 윈도우7 시스템 리소스 확인하기	11451	2013/03/04
92	[사이트관리] www 로 접속하면 떼고 접속하기 [1]	11461	2009/01/13
91	[윈도우] 도스에서 드라이버 레터 고정하기 [1]	11507	2010/07/12
90	[유틸리티] Winamp Preferences (윈엠프 설정)	11512	2003/07/12
89	[브라우저] 파이어폭스에서 맞춤법 체크하기	11519	2010/11/16
88	[기타] 영남대학교 자유게시판 RSS	11539	2009/01/21
87	[웹로그] MySQL euc-kr, latin1 문자코드 UTF-8로 컨버팅 하기 [1]	11559	2010/09/17
86	[텔넷] MySQL 비밀번호 변경하기	11569	2010/12/02
85	[윈도우] 윈도우 하드를 다른 컴퓨터로 이동해서 사용하기	11599	2008/08/30
84	[윈도우] 사용하고 있는 제품 버전을 확인하는 방법	11619	2003/08/13