-
序号
规则
解释
1
User-agent: Baiduspider
开始配置:Baiduspider
2
Disallow: /report
禁止Baiduspider访问/report目录(包括子目录)
3
User-agent: Googlebot
开始配置:Googlebot
4
Disallow: /report
禁止Googlebot访问/report目录(包括子目录)
5
User-agent: MSNBot
开始配置:MSNBot
6
Disallow: /report
禁止MSNBot访问/report目录(包括子目录)
7
User-agent: Baiduspider-image
开始配置:Baiduspider-image
8
Disallow: /report
禁止Baiduspider-image访问/report目录(包括子目录)
9
User-agent: YoudaoBot
开始配置:YoudaoBot
10
Disallow: /report
禁止YoudaoBot访问/report目录(包括子目录)
11
User-agent: Sogou web spider
开始配置:Sogou web spider
12
Disallow: /report
禁止Sogou web spider访问/report目录(包括子目录)
13
User-agent: Sogou inst spider
开始配置:Sogou inst spider
14
Disallow: /report
禁止Sogou inst spider访问/report目录(包括子目录)
15
User-agent: Sogou spider2
开始配置:Sogou spider2
16
Disallow: /report
禁止Sogou spider2访问/report目录(包括子目录)
17
User-agent: Sogou blog
开始配置:Sogou blog
18
Disallow: /report
禁止Sogou blog访问/report目录(包括子目录)
19
User-agent: Sogou News Spider
开始配置:Sogou News Spider
20
Disallow: /report
禁止Sogou News Spider访问/report目录(包括子目录)
21
User-agent: Sogou Orion spider
开始配置:Sogou Orion spider
22
Disallow: /report
禁止Sogou Orion spider访问/report目录(包括子目录)
23
User-agent: ChinasoSpider
开始配置:ChinasoSpider
24
Disallow: /report
禁止ChinasoSpider访问/report目录(包括子目录)
25
User-agent: Sosospider
开始配置:Sosospider
26
Disallow: /report
禁止Sosospider访问/report目录(包括子目录)
27
User-agent: Yisouspider
开始配置:Yisouspider
28
Disallow: /report
禁止Yisouspider访问/report目录(包括子目录)
29
User-agent: EasouSpider
开始配置:EasouSpider
30
Disallow: /report
禁止EasouSpider访问/report目录(包括子目录)
31
User-agent: Bingbot
开始配置:Bingbot
32
Disallow: /report
禁止Bingbot访问/report目录(包括子目录)
33
User-Agent: 360Spider
开始配置:360Spider
34
Disallow: /report
禁止360Spider访问/report目录(包括子目录)
35
User-Agent: Sogouspider
开始配置:Sogouspider
36
Disallow: /report
禁止Sogouspider访问/report目录(包括子目录)
37
User-Agent: Yahoo! Slurp
开始配置:Yahoo! Slurp
38
Disallow: /report
禁止Yahoo! Slurp访问/report目录(包括子目录)
39
User-agent: EtaoSpider
开始配置:EtaoSpider
40
Disallow: /report
禁止EtaoSpider访问/report目录(包括子目录)
41
User-agent: HuihuiSpider
开始配置:HuihuiSpider
42
Disallow: /report
禁止HuihuiSpider访问/report目录(包括子目录)
43
User-agent: GwdangSpider
开始配置:GwdangSpider
44
Disallow: /report
禁止GwdangSpider访问/report目录(包括子目录)
45
User-agent: WochachaSpider
开始配置:WochachaSpider
46
Disallow: /report
禁止WochachaSpider访问/report目录(包括子目录)
47
User-agent: msnbot-media
开始配置:msnbot-media
48
Disallow: /report
禁止msnbot-media访问/report目录(包括子目录)
49
User-agent: Twitterbot
开始配置:Twitterbot
50
Disallow: /report
禁止Twitterbot访问/report目录(包括子目录)
51
User-agent: *
开始配置:所有搜索引擎
52
Disallow: /report
禁止所有搜索引擎访问/report目录(包括子目录)