-
序号
规则
解释
1
User-agent: *
开始配置:所有搜索引擎
2
Allow: /
允许所有搜索引擎访问网站的任何部分
3
Disallow: /backup
禁止所有搜索引擎访问/backup目录(包括子目录)
4
Disallow: /api
禁止所有搜索引擎访问/api目录(包括子目录)
5
Disallow: /js
禁止所有搜索引擎访问/js目录(包括子目录)
6
Disallow: /statics
禁止所有搜索引擎访问/statics目录(包括子目录)
7
Disallow: /phone
禁止所有搜索引擎访问/phone目录(包括子目录)
8
Disallow: /newindex
禁止所有搜索引擎访问/newindex目录(包括子目录)
9
Disallow: /supload
禁止所有搜索引擎访问/supload目录(包括子目录)
10
Disallow: /openflash
禁止所有搜索引擎访问/openflash目录(包括子目录)
11
Disallow: /icp
禁止所有搜索引擎访问/icp目录(包括子目录)
12
Disallow: /app
禁止所有搜索引擎访问/app目录(包括子目录)
13
Disallow: /api.php
禁止所有搜索引擎访问根目录下的api.php文件
14
Disallow: /tools/fdjsq.html?
禁止所有搜索引擎访问/tools目录下的fdjsq.html,参数为的页面
15
User-agent: Baiduspider
开始配置:Baiduspider
16
Disallow: /*?*
禁止Baiduspider访问任何带参数的页面
17
Sitemap: http://www.xafc.com/sitemap.html
Sitemap地址: http://www.xafc.com/sitemap.html