robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 5 / 57 pages

	제목		날짜
635	[윈도우] [윈도우10] 가상데스크탑 활용하기(단축키)	71	2020/02/01
634	[리눅스서버] 리눅스 폴더 찾기	71	2020/04/13
633	[엑셀] 엑셀 vba 년월일	73	2019/02/04
632	[MySQL] MySQL 명령어	74	2017/03/15
631	[GitHub] 이미 push된 file .gitignore 적용하기	74	2022/01/01
630	[리눅스서버] Ubuntu php7.0-fpm 세팅 중 오류	76	2018/03/25
629	[리눅스서버] [Ubuntu + Nginx + PHP7] 502 error log	79	2017/03/07
628	[Nginx] nginx-redirects-http-to-https-and-www-to-non-www	79	2018/04/21
627	[Apm] WPИ-XM	80	2015/11/17
626	[Nginx] Nginx Access Log 포맷 설정	80	2017/10/23
625	[리눅스서버] 리눅스 계정 목록 보기	84	2017/06/26
624	[Apm] xampp	87	2015/11/18