-
序号
规则
解释
1
User-agent: Baiduspider
开始配置:Baiduspider
2
Disallow:
禁止Baiduspider访问目录(包括子目录)
3
User-agent: YodaoBot
开始配置:YodaoBot
4
Disallow:/
禁止YodaoBot访问网站的任何部分
5
User-agent: Sosospider
开始配置:Sosospider
6
Disallow:/
禁止Sosospider访问网站的任何部分
7
User-agent: sogou spider
开始配置:sogou spider
8
Disallow:/
禁止sogou spider访问网站的任何部分
9
User-agent: yisouspider
开始配置:yisouspider
10
Disallow:/
禁止yisouspider访问网站的任何部分
11
User-agent: Googlebot
开始配置:Googlebot
12
Disallow:/
禁止Googlebot访问网站的任何部分
13
User-agent: Bingbot
开始配置:Bingbot
14
Disallow:/
禁止Bingbot访问网站的任何部分
15
User-agent: Teoma
开始配置:Teoma
16
Disallow:/
禁止Teoma访问网站的任何部分
17
User-agent: ia_archiver
开始配置:ia_archiver
18
Disallow:/
禁止ia_archiver访问网站的任何部分
19
User-agent: twiceler
开始配置:twiceler
20
Disallow:/
禁止twiceler访问网站的任何部分
21
User-agent: MSNBot
开始配置:MSNBot
22
Disallow:/
禁止MSNBot访问网站的任何部分
23
User-agent: Robozilla
开始配置:Robozilla
24
Disallow:/
禁止Robozilla访问网站的任何部分
25
User-agent: Gigabot
开始配置:Gigabot
26
Disallow:/
禁止Gigabot访问网站的任何部分
27
User-agent: Gigabot
开始配置:Gigabot
28
Disallow:/
禁止Gigabot访问网站的任何部分
29
User-agent: MJ12bot
开始配置:MJ12bot
30
Disallow:/
禁止MJ12bot访问网站的任何部分
31
User-agent: Petalbot
开始配置:Petalbot
32
Disallow:/
禁止Petalbot访问网站的任何部分
33
User-agent: googlebot_image
开始配置:googlebot_image
34
Disallow:/
禁止googlebot_image访问网站的任何部分
35
User-agent: googlebot-mobile
开始配置:googlebot-mobile
36
Disallow:/
禁止googlebot-mobile访问网站的任何部分
37
User-agent: yahoo_mmcrawler
开始配置:yahoo_mmcrawler
38
Disallow:/
禁止yahoo_mmcrawler访问网站的任何部分
39
User-agent: yahoo_blogs
开始配置:yahoo_blogs
40
Disallow:/
禁止yahoo_blogs访问网站的任何部分
41
User-agent: psbot
开始配置:psbot
42
Disallow:/
禁止psbot访问网站的任何部分
43
User-agent: *
开始配置:所有搜索引擎
44
Disallow:
禁止所有搜索引擎访问目录(包括子目录)
45
Disallow: /zb_system/admin/
禁止所有搜索引擎访问/zb_system/admin目录
46
Sitemap: https://www.cpfntp.com/sitemap-page/1.xml
Sitemap地址:https