robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 14 / 57 pages

	제목		날짜
527	[기본] 내 티스토리에 인기글 목록을 달아보자	5211	2007/11/08
526	[웹로그] 윈도를 빠르게 끄자.	6860	2007/11/08
525	[기본] 윈도를 빠르게 끄자.	5149	2007/11/08
524	[웹로그] 쥬크온 1분 제한 제거 패치	0	2007/11/09
523	[기본] 쥬크온 1분 제한 제거 패치	4	2007/11/09
522	[웹로그] 입력폼과 이미지폼의 정렬은 어떻게 맞추나요?	9776	2007/11/09
521	[기본] 입력폼과 이미지폼의 정렬은 어떻게 맞추나요?	5542	2007/11/09
520	[기본] 한메일, 네이버, 지메일 간 POP 보내고 받기	8079	2007/11/11
519	[웹로그] 한메일, 네이버, 지메일 간 POP 보내고 받기	0	2007/11/11
518	[기본] MP3 무제한 다운로드 송사리	6407	2007/11/12
517	[웹로그] ebs, 파이어폭스 지원은 안되겠니? [1]	7279	2007/11/12
516	[기본] ebs, 파이어폭스 지원은 안되겠니?	8480	2007/11/12