robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 13 / 57 pages

	제목		날짜
539	[웹로그] 한컴쪽지 1.5	8388	2007/11/05
538	[웹로그] HTML 저장 형식의 메모프로그램, jwFreeNote 5.7 release 6	5829	2007/11/06
537	[웹로그] 메일의 진화	5097	2007/11/06
536	[기본] Quick Search?	4724	2007/11/06
535	[웹로그] Quick Search?	4227	2007/11/06
534	[웹로그] 환율, 좀 올라주면 안되겠니? [1]	6527	2007/11/07
533	[기본] 오픈아이디, 내 도메인으로도 활용 가능할까?	5131	2007/11/07
532	[웹로그] 오픈아이디, 내 도메인으로도 활용 가능할까?	6272	2007/11/07
531	[기본] 오픈아이디, 왜 아이디를 만들기 위해서 아이디를 다시 또 만들어야 하는가?	9352	2007/11/07
530	[웹로그] 각 블로그 포스팅에 대한 조회수를 설정해보자.	6288	2007/11/08
529	[기본] 각 블로그 포스팅에 대한 조회수를 설정해보자.	5159	2007/11/08
528	[웹로그] 내 티스토리에 인기글 목록을 달아보자	6152	2007/11/08