robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 29 / 57 pages

	제목		날짜
347	[브라우저] 구글 크롬 북마크 수동 가져오기	14747	2009/11/29
346	[기본] 백신 프로그램 뭘 사용할까	9174	2009/12/02
345	[하드웨어] 백신 프로그램 뭘 사용할까	7927	2009/12/02
344	[기본] 고스트 복원 후 해야할 일	9816	2009/12/02
343	[기본] 노트북 키맵핑	10606	2009/12/17
342	[하드웨어] 노트북 키맵핑	10952	2009/12/17
341	[기본] X61 블루투스	10109	2010/01/04
340	[메뉴얼] A8N-E 메인보드 메뉴얼	12573	2010/01/20
339	[웹로그] 홈페이지 운영의 지침	7264	2010/02/24
338	[웹 제작] 웹페이지 제거 요청	10548	2010/02/25
337	[웹로그] 웹서비스들.	5799	2010/02/28
336	[X61] 전원이 켜지지 않던 문제	9373	2010/03/04