robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 6 / 57 pages

	제목		날짜
623	[웹로그] 초보자 파이어폭스 사용하기 및 기본적인 추천플러그인 (작성 중 임시)	7903	2007/10/07
622	[하드웨어] 업어온 아버지의 PC	6700	2007/10/07
621	[웹로그] IDtail, 왜 이래?!	5755	2007/10/07
620	[기본] 우리지역 도서관 이용해보자.	6186	2007/10/07
619	[웹로그] 우리지역 도서관 이용해보자.	6417	2007/10/07
618	[웹로그] 아토 1.8 (IE Toy 1.8 BETA2 patch1) [1]	5236	2007/10/08
617	[웹로그] ImageShack 각종 편리한 툴	4417	2007/10/08
616	[하드웨어] 고장난 컴퓨터	6625	2007/10/08
615	[웹로그] 유니클락 블로그에 삽입하기	16113	2007/10/08
614	[하드웨어] 메인보드 수리 보내기 [1]	7075	2007/10/08
613	[웹로그] 인터넷 한글 폰트 [1]	6899	2007/10/10
612	[웹로그] 넷한글 인터넷 워드프로세서	7427	2007/10/10