robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 12 / 57 pages

	제목		날짜
551	[기본] 테터툴즈 (+티스토리) 에서 mp3 추출하기 + 뽀나스	2	2007/11/03
550	[웹로그] 테터툴즈 (+티스토리) 에서 mp3 추출하기 + 뽀나스	0	2007/11/03
549	[웹로그] mms:// 다운받기	4957	2007/11/04
548	[기본] 내 블로그에 알맞는 수익도구는 무엇일까?	3	2007/11/05
547	[웹로그] 내 블로그에 알맞는 수익도구는 무엇일까?	0	2007/11/05
546	[기본] 컴퓨터 관련 팁을 올려놓은 블로거	5749	2007/11/05
545	[웹로그] 컴퓨터 관련 팁을 올려놓은 블로거	6063	2007/11/05
544	[기본] jwFN에 바라는 기능 [2]	5660	2007/11/05
543	[웹로그] jwFN에 바라는 기능 [2]	6345	2007/11/05
542	[기본] 구글 애드센스 주의할 점 [3]	5806	2007/11/05
541	[웹로그] 구글 애드센스 주의할 점 [3]	6142	2007/11/05
540	[웹로그] jwFN 사용자 추가 템플릿	4929	2007/11/05