robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 16 / 57 pages

	제목		날짜
503	[웹로그] 홈페이지나 블로그에 MSN 대화창 삽입하기 혹은 MSN 로그인 상태 보여주기	7516	2007/11/18
502	[기본] 홈페이지나 블로그에 MSN 대화창 삽입하기 혹은 MSN 로그인 상태 보여주기	4874	2007/11/18
501	[웹로그] Windows Live Writer 사용해보기 [1]	5593	2007/11/18
500	[기본] Windows Live Writer 사용해보기 [1]	4792	2007/11/18
499	[웹로그] BlogAPI를 이용해서 제로보드XE에 글 올리기	11275	2007/11/18
498	[기본] BlogAPI를 이용해서 제로보드XE에 글 올리기	7614	2007/11/18
497	[웹로그] Daum 캘린더로 수능 일정 공유해요! [2]	8129	2007/11/20
496	[기본] Daum 캘린더로 수능 일정 공유해요! [2]	6407	2007/11/20
495	무료 FTP 사이트	29821	2007/11/20
494	[웹로그] Windows 고전(흑) 테마	6194	2007/11/20
493	[기본] Windows 고전(흑) 테마	4940	2007/11/20
492	[웹로그] Daum 캘린더, 이런 기능 어떨까? [2]	6607	2007/11/20