* main *

* BBS *

* gallery *

* profile *

* link *



[카테고리]

* 음악 *
* 잡담 *
* 잡다한 고찰 *

* 술 이야기 *
* 시음 노트 *
* 술잔 콜렉션 *

* 컴퓨터 관련 *
* 이런저런 메모 *
* 공지사항 *

* 물건들 *
* 이런저런 추억 *
* 책 이야기 *
* 여행의 추억 *

* 추억의 게임 *
* 추억의 애니 *
* 만화책 이야기 *
* 미드 이야기 *
* 매직 더 개더링 *


[최근 댓글]

음. 자희향은 유명하긴 했지만 제 ...
  by 아이어스
 
2021-06-24

제가 알던 동동주는 동동주가 아니...
  by 아리무스
 
2021-06-23

사진상의 차이가 실제보다 못해서 ...
  by 아이어스
 
2021-06-19

비교사진을 보니 생각보다 더 심각...
  by 아리무스
 
2021-06-18

기시감님 방문 감사합니다. 글로브...
  by 아이어스
 
2021-06-02

와... 문득 생각이나..CD를 꺼내 듣...
  by 기시감
 
2021-06-01

문제가 해결되셨으니 다행이네요. ...
  by 아이어스
 
2021-05-16

AS센터 담당보다 매장쪽 담당이 지...
  by 아리무스
 
2021-05-15

영세 수입업체의 AS문제는 확실히 ...
  by 아이어스
 
2021-05-14

덕분에 좋은 장비를 구입하게 되었...
  by 아리무스
 
2021-05-13

한길님 안녕하세요. 긴 글을 읽어주...
  by 아이어스
 
2021-05-10

좋은 글 잘 읽엇습니다. 덕분에 제...
  by 한길
 
2021-05-10

MM-1이 그렇게 단종될 줄은 정말 몰...
  by 아이어스
 
2021-04-05

조금만 일찍 관심을 가졌더라면 MM-...
  by 아리무스
 
2021-04-05

단순히 스피커 vs 헤드폰 만 따지면...
  by 아이어스
 
2021-03-30


추억의 상자


Category List admin  
robots.txt
 

운영초기부터 홈페이지의 거의 모든 페이지에 로봇검색거부 메타태그를 걸어두었기 때문에 검색로봇관련 부분은 아예 신경을 안 쓰고 있었습니다만, 최근에 사이트맵관련 업데이트를 하면서 robots.txt에 관련 기록을 할 수 있었기에 관심을 가져봤습니다.

뭐 말이 관심이지 이건 워낙 단순해서;

root의 robots.txt는 계정 내의 파일 및 디렉토리에 검색로봇이 접근하는 권한을 정해줍니다.
물론 robots.txt는 제가 알기로 의무는 아닙니다만 대부분의 검색로봇이 이를 받아들이고 있습니다. 그래서 요전에 국내 모 포탈사이트가 검색거부태그를 무시한다고 했다가 논란이 있었던 것 같기도 했더군요.

파일 내에 쓸 수 있는 구문은

사이트맵 파일
Sitemap: 주소

접근을 허용하는 검색로봇 종류
User-agent:

접근 거부하는 디렉토리 및 파일
Disallow:/디렉토리명/
Disallow:/파일명 등

접근 허용하는 디렉토리 및 파일
Allow:/디렉토리 및 파일명 등

뭐 크게 이 정도인 것 같더군요.

http://www.robotstxt.org/ 를 참조하면 관련 정보를 더 얻을 수 있는 것 같지만 귀찮아서 전 안 읽어봤습니다(...)

참고로 robots.txt 등에 명시된 사이트 구조는 역으로 해킹등에 이용되는 등 보안 상의 취약점이 될 수도 있습니다.


2012-07-31 04:04:16 | [Comment(0)]




   ☆computer

컴퓨터를 포맷했습니다-_-;  2014-01-21
SNS 플러그인 설치  2012-09-12
[JAVA SCRIPT] getElementById()  2012-09-05
[HTML] link 태그 숏 컷 아이콘 지정  2012-09-03
SEO - 검색엔진최적화  2012-08-22
강아지랑 송아지도 만들 수 있는 CSS 강좌  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 08편 : 그 외   2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 07편 : 폼  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 06편 : 메타 태그  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 05편 : 프레임  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 04편 : 테이블  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 03편 : 글자쓰기와 이미지 출력, 하이퍼링크  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 02편 : HTML 문서의 기본구조  2012-08-17
강아지랑 송아지도 만들 수 있는 HTML 강좌 - 01편 : 태그란 무엇인가?  2012-08-17
강아지랑 송아지도 만들 수 있는 홈페이지 강좌 - 인트로  2012-08-17
Chrome 브라우저 등에서의 style.display 속성문제  2012-08-07
사이트맵을 만들어보자  2012-07-31
robots.txt  2012-07-31
[JAVA SCRIPT] 코멘트 창 불러오기  2012-07-31
[mySQL] select로 검색  2012-07-31
[PHP] 따옴표 사용 문제  2012-07-31
[PHP] 정규표현식으로 깨진 문자 없애기  2012-07-31
[HTML] <nobr></nobr>  2012-07-31
컴퓨터 관련된 게시물을 정리하려고 합니다.  2012-07-31








猫愛 - MyoAe - Homepage Mode
Ver. 1.45

by Aierse