robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 29 / 57 pages

	제목		날짜
347	[하드웨어] 어머니 노트북 구매하기	9626	2009/10/18
346	[하드웨어] 소켓 939 보드 구하기	9692	2009/09/21
345	[웹로그] 애드센스	6377	2009/09/19
344	[하드웨어] 컴퓨터 관련 포럼 [1]	9493	2009/09/23
343	[하드웨어] 컴퓨터 구매 목록	8894	2009/11/15
342	[웹로그] eond.com 도메인 연장 이력	8107	2010/08/18
341	[웹로그] 이온디 파비콘 만들기	6973	2009/09/11
340	[하드웨어] 잉크 토너 구매	9524	2010/03/08
339	[웹로그] 사이트바 디자인 모음	6952	2009/08/12
338	[하드웨어] SD카드 복구하기 [1]	16643	2009/08/04
337	[웹로그] 내가 사용하는 프로그램	6789	2009/09/11
336	[하드웨어] PC 구매하기	8494	2009/06/30