robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 54 / 57 pages

	제목		날짜
47	[네트워크] FON FAQ [1]	8319	2007/09/12
46	[생활] 고등학교 졸업증명서 인터넷으로 출력가능합니다(공인인증서 필요!!!!).~~	18823	2007/09/10
45	[미디어/녹음·재생] 동영상 WMV 인코딩 방법	9422	2007/09/04
44	[기타] 국내외 뉴스를 한눈에 보자 (뉴스바다)	9149	2007/09/02
43	[생활] 운동화끈 안 풀리는 법	9972	2007/09/02
42	[기타] 블로그에 북로그 달기	9407	2007/09/01
41	[기타] 컴퓨터 두대로 iTunes 음악 공유하기 (by 김동범)	13049	2007/08/31
40	[미디어/녹음·재생] flv 다운받기 (동영상 다운받기) [1]	14345	2007/08/26
39	[백신/악성코드/보안] Windows 보안업데이트 솔루션, PCSmile	9334	2007/08/26
38	[미디어/녹음·재생] Imeem.com 과 같은 음악갤러리 사이트... esnips (by 장화신은고양이)	8674	2007/08/24
37	[미디어/녹음·재생] miniwiniFlashMusicbox	7413	2007/08/24
36	[기타] 폰트 설치하기	9375	2007/04/16