-
序号
规则
解释
1
User-agent: Teoma
开始配置:Teoma
2
Disallow: /
禁止Teoma访问网站的任何部分
3
User-agent: ia_archiver
开始配置:ia_archiver
4
Disallow: /
禁止ia_archiver访问网站的任何部分
5
User-agent: twiceler
开始配置:twiceler
6
Disallow: /
禁止twiceler访问网站的任何部分
7
User-agent: MSNBot
开始配置:MSNBot
8
Disallow: /
禁止MSNBot访问网站的任何部分
9
User-agent: Scrubby
开始配置:Scrubby
10
Disallow: /
禁止Scrubby访问网站的任何部分
11
User-agent: Robozilla
开始配置:Robozilla
12
Disallow: /
禁止Robozilla访问网站的任何部分
13
User-agent: Gigabot
开始配置:Gigabot
14
Disallow: /
禁止Gigabot访问网站的任何部分
15
User-agent: yahoo-mmcrawler
开始配置:yahoo-mmcrawler
16
Disallow: /
禁止yahoo-mmcrawler访问网站的任何部分
17
User-agent: yahoo-blogs/v3.9
开始配置:yahoo-blogs/v3.9
18
Disallow: /
禁止yahoo-blogs/v3.9访问网站的任何部分
19
User-agent: psbot
开始配置:psbot
20
Disallow: /
禁止psbot访问网站的任何部分
21
User-agent: *
开始配置:所有搜索引擎
22
Disallow:
禁止所有搜索引擎访问目录(包括子目录)
23
Disallow: /super/
禁止所有搜索引擎访问/super目录
24
Disallow: /wx
禁止所有搜索引擎访问/wx目录(包括子目录)
25
Disallow: /esf/xq_cslistnew
禁止所有搜索引擎访问/esf/xq_cslistnew目录(包括子目录)
26
Disallow: /gzf/
禁止所有搜索引擎访问/gzf目录
27
Disallow: /info/news_count
禁止所有搜索引擎访问/info/news_count目录(包括子目录)
28
Disallow: /ppgyhx
禁止所有搜索引擎访问/ppgyhx目录(包括子目录)
29
Disallow: /information/
禁止所有搜索引擎访问/information目录
30
Disallow: /counsellorvideo
禁止所有搜索引擎访问/counsellorvideo目录(包括子目录)
31
Disallow: /deco/
禁止所有搜索引擎访问/deco目录
32
Disallow: /report/
禁止所有搜索引擎访问/report目录
33
Disallow: /option
禁止所有搜索引擎访问/option目录(包括子目录)
34
Disallow: /ppgystore
禁止所有搜索引擎访问/ppgystore目录(包括子目录)
35
Disallow: /rjz
禁止所有搜索引擎访问/rjz目录(包括子目录)
36
Disallow: /ckeditor
禁止所有搜索引擎访问/ckeditor目录(包括子目录)
37
Disallow: /app
禁止所有搜索引擎访问/app目录(包括子目录)
38
Disallow: /mem
禁止所有搜索引擎访问/mem目录(包括子目录)