* main *

* BBS *

* gallery *

* profile *

* link *



[카테고리]

* 음악 *
* 잡담 *
* 잡다한 고찰 *

* 술 이야기 *
* 시음 노트 *
* 술잔 콜렉션 *

* 컴퓨터 관련 *
* 이런저런 메모 *
* 공지사항 *

* 물건들 *
* 이런저런 추억 *
* 책 이야기 *
* 여행의 추억 *

* 추억의 게임 *
* 추억의 애니 *
* 만화책 이야기 *
* 미드 이야기 *
* 매직 더 개더링 *


[최근 댓글]

궁금이님 안녕하세요. 방문 감사드...
  by 아이어스
 
2021-01-17

도마 한번 사보려고 검색중에 만난 ...
  by 궁금이
 
2021-01-16

뭐 파스퇴르는 거의 항상 생물학으...
  by 아이어스
 
2021-01-06

호오 놀라운 파스퇴르의 업적. 우리...
  by 말랑문어
 
2021-01-05

아핫님 안녕하세요. 방문 감사드립...
  by 아이어스
 
2020-12-29

좋은글 감사합니다. 세상엔 공부해...
  by 아핫
 
2020-12-29

그러게요. 빨리 이 시국이 좀 괜찮...
  by 아이어스
 
2020-12-02

언제까지 어깨춤을 추게 할꺼야? 라...
  by 아델
 
2020-12-02

안녕하세요, 코카콜라제로님. 저도 ...
  by 아이어스
 
2020-11-25

도마 구매하려고 구글링하다 제가 ...
  by 코카콜라제로
 
2020-11-25

홋홋 감사합니다^^;
  by 아이어스
 
2020-11-23

아이어스님이 최고!!!
  by 아델
 
2020-11-21

허허 그러신가요. 그냥 연례행사라 ...
  by 아이어스
 
2020-11-20

아닙니다..닫히면 깜짝 놀라요..!
  by 아델
 
2020-11-20

행복한 공주님 안녕하세요. 방문해...
  by 아이어스
 
2020-11-14


추억의 상자


Category List admin  
robots.txt
 

운영초기부터 홈페이지의 거의 모든 페이지에 로봇검색거부 메타태그를 걸어두었기 때문에 검색로봇관련 부분은 아예 신경을 안 쓰고 있었습니다만, 최근에 사이트맵관련 업데이트를 하면서 robots.txt에 관련 기록을 할 수 있었기에 관심을 가져봤습니다.

뭐 말이 관심이지 이건 워낙 단순해서;

root의 robots.txt는 계정 내의 파일 및 디렉토리에 검색로봇이 접근하는 권한을 정해줍니다.
물론 robots.txt는 제가 알기로 의무는 아닙니다만 대부분의 검색로봇이 이를 받아들이고 있습니다. 그래서 요전에 국내 모 포탈사이트가 검색거부태그를 무시한다고 했다가 논란이 있었던 것 같기도 했더군요.

파일 내에 쓸 수 있는 구문은

사이트맵 파일
Sitemap: 주소

접근을 허용하는 검색로봇 종류
User-agent:

접근 거부하는 디렉토리 및 파일
Disallow:/디렉토리명/
Disallow:/파일명 등

접근 허용하는 디렉토리 및 파일
Allow:/디렉토리 및 파일명 등

뭐 크게 이 정도인 것 같더군요.

http://www.robotstxt.org/ 를 참조하면 관련 정보를 더 얻을 수 있는 것 같지만 귀찮아서 전 안 읽어봤습니다(...)

참고로 robots.txt 등에 명시된 사이트 구조는 역으로 해킹등에 이용되는 등 보안 상의 취약점이 될 수도 있습니다.


2012-07-31 04:04:16 | [Comment(0)]




   ☆computer

컴퓨터를 포맷했습니다-_-;  2014-01-21
SNS 플러그인 설치  2012-09-12
[JAVA SCRIPT] getElementById()  2012-09-05
[HTML] link 태그 숏 컷 아이콘 지정  2012-09-03
SEO - 검색엔진최적화  2012-08-22
강아지랑 송아지도 만들 수 있는 CSS 강좌  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 08편 : 그 외   2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 07편 : 폼  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 06편 : 메타 태그  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 05편 : 프레임  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 04편 : 테이블  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 03편 : 글자쓰기와 이미지 출력, 하이퍼링크  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 02편 : HTML 문서의 기본구조  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 01편 : 태그란 무엇인가?  2012-08-17
강아지랑 송아지도 만들 수 있는 홈페이지 강좌 - 인트로  2012-08-17
Chrome 브라우저 등에서의 style.display 속성문제  2012-08-07
사이트맵을 만들어보자  2012-07-31
robots.txt  2012-07-31
[JAVA SCRIPT] 코멘트 창 불러오기  2012-07-31
[mySQL] select로 검색  2012-07-31
[PHP] 따옴표 사용 문제  2012-07-31
[PHP] 정규표현식으로 깨진 문자 없애기  2012-07-31
[HTML] <nobr></nobr>  2012-07-31
컴퓨터 관련된 게시물을 정리하려고 합니다.  2012-07-31








猫愛 - MyoAe - Homepage Mode
Ver. 1.45

by Aierse