robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 17 / 57 pages

	제목		날짜
491	[기본] Daum 캘린더, 이런 기능 어떨까? [2]	5652	2007/11/20
490	[웹로그] 아이튠즈를 업데이트 후 실행이 안될 때 [1]	9716	2007/11/21
489	[기본] 아이튠즈를 업데이트 후 실행이 안될 때	7321	2007/11/21
488	[웹로그] ncloudblog님의 스킨 날짜 부분 따라하기 [1]	6890	2007/11/21
487	[기본] ncloudblog님의 스킨 날짜 부분 따라하기	6237	2007/11/21
486	[웹로그] IE와 FF에서 달리 보이는 png	5298	2007/11/22
485	[기본] IE와 FF에서 달리 보이는 png	4311	2007/11/22
484	[웹로그] 내 블로그에 검색용 애드센스를 삽입하자 [1] [1]	6118	2007/11/22
483	[기본] 내 블로그에 검색용 애드센스를 삽입하자	5207	2007/11/22
482	[웹로그] DIV 에 마우스 오버 시 색상 바꾸기 [1] [1]	14989	2007/11/22
481	[기본] DIV 에 마우스 오버 시 색상 바꾸기	6438	2007/11/22
480	[웹로그] 구글 검색창 소스 [1]	0	2007/11/23