robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 2 / 57 pages

	제목	날짜
671	[웹로그] SnagIt, Camtasia 무료 배포	2007/12/04
670	[웹 제작] Let's Encrypt 웹호스팅에 적용하기	2015/11/06
669	[윈도우] 속도빠른 VPN으로 불금을 즐겨보자	2016/03/14
668	[리눅스서버] [CentOS] 가비아 서버 사용법	2017/05/06
667	[Nginx] nginx rewrite 룰	2017/05/30
666	[MySQL] MySQL/MariaDB 디비 튜닝하기	2017/06/25
665	[리눅스서버] Nginx 튜닝	2017/06/26
664	[리눅스서버] 계정생성 쉘스크립트	2017/10/03
663	[Nginx] SSL 설정하기	2017/10/15
662	[Nginx] certbot 수동 발급	2017/11/02
661	[Nginx] 리노드 서버 다운그레이드	2017/11/08
660	[웹 제작] 모바일에서 쇼핑몰이나 홈페이지 들어가면 자동적으로 바탕화면에 즐찾 생성 되는 방법	2017/12/02