[킴스큐 Rb]킴스큐 Rb 1.2.0 robot.txt 내용
Web Study/킴스큐 Rb 2012. 10. 15. 19:54 |둘러보니 아마도 index.php을 통해서 접근되는 내용만 크롤링하게 하는 것 같다. (어드민의 내용은 제외)
User-agent: *
Disallow: /rb/_core/
Disallow: /rb/_var/
Disallow: /rb/_tmp/
Disallow: /rb/layouts/
Disallow: /rb/modules/
Disallow: /rb/pages/
Disallow: /rb/files/
Disallow: /rb/switchs/
Disallow: /rb/widgets/
Disallow: /*system=edit
Disallow: /*_themeConfig
Disallow: /rb/admin
Disallow: /*m=admin
Disallow: /rb/p/login
Disallow: /*mod=login
Disallow: /rb/p/join
Disallow: /*mod=join
Disallow: /*mod=write
Disallow: /*iframe=Y
Disallow: /*keyword=
Disallow: /*mod=delete
Disallow: /*&a=
Disallow: /*?a=
Disallow: /*action/
Disallow: /*type=modify
'Web Study > 킴스큐 Rb' 카테고리의 다른 글
[킴스큐 Rb]킴스큐 Rb 1.2.0 패키지 폴더/파일 내용 분석 2 - _core 폴더 (0) | 2012.10.16 |
---|---|
[킴스큐 Rb]킴스큐 Rb 1.2.0 패키지 폴더/파일 내용 분석 1 - 최상위 파일들 (0) | 2012.10.15 |
[킴스큐 Rb]게시물 추출 스탠다드 소스코드 (0) | 2012.10.11 |
[킴스큐 Rb]킴스큐 Rb 1.2.0 index.php 내용 및 인클루드 되는 php 파일 목록/내용 (0) | 2012.10.11 |
[킴스큐 Rb]Q&A Clear Widget Cache는 어떤 방식으로 동작이 되나요? (0) | 2012.10.10 |