robots.txt中可以屏蔽中文url吗

*发表于 2015-7-17 16:40:04* · 发表于 2015-7-17 16:40:04

请问下各位，robots.txt，中如何屏蔽中文url，一个目录下，有英文url和中文url，
xxx.com/xxx/吃饭/
xxx.com/xxx/手机/
xxx.com/xxx/abc/
如何把其中的中文url在robots.txt中屏蔽呢，

*发表于 2015-7-18 09:43:09* · 发表于 2015-7-18 09:43:09

这还真没有碰到过，中文的URL，想想也是醉了。
百度会对中文进行编码吗？UTF8还是GBK呢？
等待有经验的回答。

*发表于 2015-7-18 22:03:38* · 发表于 2015-7-18 22:03:38

xxx.com/xxx/吃饭/ =http://xxx.com/xxx/%E5%90%83%E9%A5%AD/
xxx.com/xxx/手机/ =http://xxx.com/xxx/%E6%89%8B%E6%9C%BA/

然后robots.txt编码后的URL可以吗？

楼主| *发表于 2015-7-20 15:22:41* · 发表于 2015-7-20 15:22:41

good7758 发表于 2015-7-18 22:03
xxx.com/xxx/吃饭/ =http://xxx.com/xxx/%E5%90%83%E9%A5%AD/
xxx.com/xxx/手机/ =http://xxx.com/xxx/%E6% ...

谢谢，发现这样不行

*发表于 2015-7-20 19:43:02* · 发表于 2015-7-20 19:43:02

后天测试一下就行了

帐号		自动登录	找回密码
密码			注册