robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 26 / 57 pages

	제목		날짜
383	[기본] 오픈아이디, 왜 아이디를 만들기 위해서 아이디를 다시 또 만들어야 하는가?	9352	2007/11/07
382	[웹로그] 유니클락 블로그에 삽입하기	16113	2007/10/08
381	[웹로그] mysql의 최대 성능 향상 방법	9612	2010/09/19
380	[웹로그] MySQL 외부접속 허용 및 속도 빠르게 하는 방법!	15530	2010/09/19
379	[웹로그] MySQL 관련 팁	9515	2010/09/19
378	[웹로그] mysql index 속도 높이기	10299	2010/09/19
377	[웹로그] Mysql 속도에 영향을 미치는 컴파일/링크 방법	8823	2010/09/19
376	[웹로그] 홈페이지 속도 개선	9745	2010/09/19
375	[웹로그] MySQL Index 속도 높이기..꽁수	7156	2010/09/19
374	[웹로그] Mysql 속도좀 빠르게 안되나요? 알려주세요 제발 흑흑	8728	2010/09/19
373	[웹로그] [DB 속도저하에 따른 웹페이지 접속 지연] skip-name-resolve 옵션 [2]	9942	2010/09/19
372	[웹로그] # Re: # Mysql 서버를 따로 구성하려고 합니다....	7638	2010/09/19