robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 24 / 57 pages

	제목		날짜
407	[웹로그] 고해상도 앨범 커버를 가져오자. CoverGuru [1]	5192	2007/12/22
406	[기본] 내 블로그에 검색용 애드센스를 삽입하자	5207	2007/11/22
405	[기본] 내 티스토리에 인기글 목록을 달아보자	5211	2007/11/08
404	[웹로그] 아토 1.8 (IE Toy 1.8 BETA2 patch1) [1]	5236	2007/10/08
403	원격컴퓨터소리	5251	2008/08/21
402	e-book 무료로 보기 (경기도 사이버 도서관) [1]	5252	2008/12/03
401	[기본] 손바닥에 땀, 어떻게 할까?	5257	2007/11/03
400	[기본] 블로그 수익의 종류 [2]	5258	2007/11/03
399	[리더] 리더의 조건 [4]	5258	2014/02/17
398	파란닷컴 무료문자 쿠폰 번호 공유 - 250건 [1]	5265	2008/12/25
397	무료문자보내기, extremeSMS	5288	2008/11/25
396	[웹로그] 시작프로그램 관리 & 모니터링	5292	2007/10/21