robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 11 / 57 pages

	제목		날짜
563	[웹로그] TapiSrv 이란?	5304	2007/11/02
562	[기본] 윈도우 서비스 항목 [1]	5712	2007/11/02
561	[기본] 메타블로그 사이트	4445	2007/11/02
560	[웹로그] 메타블로그 사이트	4831	2007/11/02
559	[기본] 블로그 수익의 종류 [2]	5258	2007/11/03
558	[웹로그] 블로그 수익의 종류 [2]	5541	2007/11/03
557	[기본] 윈도우 서비스, 줄이는 것만이 빠른 시스템을 위하는 길일까?	4886	2007/11/03
556	[웹로그] 윈도우 서비스, 줄이는 것만이 빠른 시스템을 위하는 길일까?	4959	2007/11/03
555	[기본] 블로그 방문객 수 늘리는 방법	4562	2007/11/03
554	[웹로그] 블로그 방문객 수 늘리는 방법	4856	2007/11/03
553	[기본] 손바닥에 땀, 어떻게 할까?	5257	2007/11/03
552	[웹로그] 손바닥에 땀, 어떻게 할까?	5964	2007/11/03