robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 24 / 57 pages

	제목		날짜
407	DaulSoft - GoreWan	5119	2008/12/25
406	책 블로그	4164	2008/12/27
405	북토피아 e-book 뷰어 프로그램(Vista)	7116	2008/12/28
404	[X61] 빨콩이 저절로 움직인다	10952	2009/01/01
403	[X61] 이제는 다시 브라우저 키로 글을 날려먹지 말자.	9942	2009/01/01
402	[사이트관리] 검색로봇 robot.txt 작성 [2]	11971	2009/01/05
401	[브라우저] 크롬을 좀 더 편리하게 사용할 수 있는 방법은 없을까?	9567	2009/01/06
400	[윈도우] 윈도우 설치 후 사용 준비 과정	11986	2009/01/11
399	[윈도우] 윈도우 설치 후 필수 프로그램(ver.3)	14282	2009/01/11
398	[윈도우] 노트북 사용자의 필수 프로그램	12800	2009/01/11
397	[윈도우] 내 컴퓨터 드라이버 설치하기	11682	2009/01/11
396	[미디어/녹음·재생] 프로디지 녹음하기	9550	2009/01/11