-
序号
规则
解释
1
User-agent: *
开始配置:所有搜索引擎
2
Disallow: /
禁止所有搜索引擎访问网站的任何部分
3
Disallow: /*?*.html$
禁止所有搜索引擎访问所有以*?*.html结尾的文件
4
Disallow: /special
禁止所有搜索引擎访问/special目录(包括子目录)
5
Allow: /*.html$
允许所有搜索引擎访问所有以*.html结尾的文件
6
Allow: /silian.xml
允许所有搜索引擎访问根目录下的silian.xml文件
7
Allow: /silian_0425.xml
允许所有搜索引擎访问根目录下的silian_0425.xml文件
8
Allow: /site.xml
允许所有搜索引擎访问根目录下的site.xml文件
9
Sitemap: https://www.sdchina.com/site.xml
Sitemap地址:https