robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 44 / 57 pages

	제목		날짜
167	AI Roboform	3399	2008/12/10
166	[X61] 뱅킹에서 빨콩 날아다니는 증상 [1]	9485	2008/12/10
165	무료 웹하드	4249	2008/12/07
164	e-book 무료로 보기 (경기도 사이버 도서관) [1]	5252	2008/12/03
163	embed 제어창만 보이게 하기	4436	2008/12/02
162	RSS 만들기	10133	2008/11/30
161	무료 mp3 다운 개소리	4995	2008/11/27
160	MP3 다운로드 검색 프로그램 cjuke	4896	2008/11/27
159	무료문자보내기, extremeSMS	5288	2008/11/25
158	[사이트관리] 구글 url 긴급 삭제 요청(구글 검색 삭제) [1]	9700	2008/10/09
157	IE7 지연현상 해결법	2901	2008/10/04
156	비스타>계속 하려면 사용 권한이 필요합니다.	9546	2008/10/02