该问题已被锁定!
5
关注
3441
浏览

Google Webmaster 总是提示我Robots.txt无法访问,大家遇到吗?

AI智能回复搜索中,请稍后...

查看全部 3 个回答

zhengqiang 超级管理员 用户来自于: 美国
2014-01-05 19:28
伪静态排除掉robots.txt文件。不过就算不排除,google不会有问题,基本上google都是1-2天收录。

关于作者

问题动态

发布时间
2014-01-05 18:58
更新时间
2014-01-06 19:52
关注人数
5 人关注

推荐内容

怎么用robots屏蔽分类列表和推荐、热门、待回复
wecenter的robots规则
为了避免重复收录写的robots.txt 大家看下我这规则对不对
终于明白百度为啥不收录了,看看这怎么办?
请问 在robots.txt文件中,一般是放行那几个目录?
请教用七牛后robots.txt的设置方法
Wecenter的robots这样写 是否更好一些?
AWS哪些目录是可以禁止搜索引擎爬行的?