有同学问百度站长学院robots问题:我们有一个使用中文的网站目录结构,这种风格:www.a.com/冒险岛/123.html,那在制作robots文件和sitemap文件可以直接用中文吗?百度能得到吗?在实际操作中,我们发现,sitemap有些文件可以生效,但是robots封禁似乎没有反应,所以我想确认:robots文件是否支持中文?
工程师答:Baiduspider目前(2016年10月)robots不支持中文。
同学问:然后我们问:UrlEncode编码会支持吗?http://www.a.cn/特殊:浏览/生死狙击:白银加特林
工程师答:robots文件支持这种写法。但它是否有效取决于当时。BaiduSpider如果是什么形式的结构链接,UrlEncode编码可以生效,中文很不幸。