robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 37 / 57 pages

	제목		날짜
251	[모바일] 안드로이드 브라우저2	7904	2012/09/12
250	[엑셀] 기본 서식 파일 Normal.dotm이(가) 변경되었습니다. 변경 사항을 저장하시겠습니까? [출처] 기본 서식 파일 Normal.dotm이(가) 변경되었습니다. 변경 사항을 저장하시겠습니까?\|작성자 키롱	7908	2014/08/03
249	[하드웨어] 백신 프로그램 뭘 사용할까	7927	2009/12/02
248	[웹 제작] 보안관련 PHP 설정 조정 안내 (출처:http://byus.net)	7978	2005/03/07
247	[웹로그] 탐색기 파일 목록 텍스트로 저장하기 [1]	8016	2007/10/23
246	[기본] mDNSResponder.exe 의 정체에 대해서 [1]	8021	2007/10/28
245	부팅 시 ntoskrnl.exe 에러 메시지가 발생을 했을 때 해결 방안	8034	2008/08/30
244	[하드웨어] 삭제되지 않는 Input Direct	8048	2009/10/28
243	[기본] 한메일, 네이버, 지메일 간 POP 보내고 받기	8079	2007/11/11
242	[웹로그] eond.com 도메인 연장 이력	8107	2010/08/18
241	[기본] 컴퓨터로 라디오 듣기	8117	2007/10/24
240	[웹로그] Daum 캘린더로 수능 일정 공유해요! [2]	8129	2007/11/20