robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 38 / 57 pages

	제목		날짜
239	[하드웨어] 휴대용 스피커 구매 : Kalon KS-18	8142	2009/06/27
238	[웹로그] AppleMobileDeviceService.exe 아예 지워버리자 [1] [1]	8176	2007/10/28
237	[윈도우] 윈도우8 시작버튼 프로그램 8StartButton	8190	2013/06/22
236	[웹로그] 판도라동영상 OpenAPI 사용후기 [1]	8203	2007/11/29
235	이 네트워크 리소스를 사용할 원한이 없습니다 라는 에러가 나올때 [1]	8241	2008/08/30
234	[기본] USB 보안 관련	8264	2010/05/14
233	[웹로그] Firefox 부가기능 Coral IE Tab	8291	2010/09/05
232	[브라우저] IE에서 XP SP2 적용 후에 썸네일이 안 보여요.	8294	2005/03/11
231	[웹로그] flyExplorer v1.80.1735 정식 버전이 나왔습니다.	8318	2007/12/02
230	[네트워크] FON FAQ [1]	8319	2007/09/12
229	[하드웨어] 저가형 케이스를 구매하는 방법	8326	2010/09/03
228	[모바일] REMOTE	8385	2012/04/23