robots.txt 작성방법 - 아임웹 전문가찾기

Share Tips & Tech

각종 팁&정보를 나누는 곳입니다.
누군가에게 도움이 된다 싶으시면 언제라도 포스팅 :)

글 등록하기 | 내글 관리하기 | 연재글 | 보관함

robots.txt 작성방법

2009.07.01 14:49 조회 수

11210

이온디

첨부파일 https://imweb.eond.com/webtip/171232

예전 이온디 robots.txt

User-agent: Googlebot
Disallow: /eond/trash
Disallow: /eond/?document_srl=17386

User-Agent: *
Disallow: /eond/?document_srl=17386&listStyle=gallery
Disallow: /eond/?document_srl=17386

user-agent: * # 모든 로봇(robot)들에 적용
disallow: / # 모든 페이지들의 색인(indexing) 금지

새롭게 바뀐 이온디 robots.txt

User-Agent: *
Disallow: /style
Disallow: /weblog
Disallow: /music
Disallow: /senario
Disallow: /2u
Disallow: /ahj
Disallow: /love
Disallow: /chat
Disallow: /me
Disallow: /sig

Total 683 articles in 53 / 57 pages

	제목		날짜
59	[엑셀] 오류 해결~!	100	2019/02/04
58	[기타] 네이버지도 api v3 사용하기	458	2019/02/25
57	[윈도우서버] robots.txt 인식이 안될 경우.	118	2019/02/27
56	[사이트관리] 웹사이트 보안검사 멀웨어 체크 / 웹사이트 악성코드 검사방법	191	2019/03/01
55	[하드웨어] LG노트북 LG13Z94 / 13ZD940-GX30K 터치패드 세손가락 드라이버 설치 (윈도우10)	1310	2019/03/29
54	[브라우저] 유투브 공유하기 자동재생 설정(웨일, 크롬)	332	2019/04/06
53	phpmyadmin 설치하기	95	2019/04/24
52	[기타] 마우스 캔버스 터치 사인 저장	173	2019/09/30
51	[엑셀] [엑셀] 원하는 날짜에 해당하는 항목값의 갯수 추출하기	110	2019/10/12
50	[리눅스서버] [solved] Warning: Journal has been rotated since unit was started. Log output is incomplete or unavailable.	1905	2019/12/08
49	[wnmp] XE 설치하기	137	2020/01/11
48	[유틸리티] [FreeCommander] 컬러 스키마 변경	328	2020/01/12