rebots.txt的设置，怎么设置可以减少带宽，还可以增加搜索引擎对网站的收录？ - WeCenter 社交化知识问答社区程序

该问题已被锁定！

5: 关注

2634: 浏览

rebots.txt的设置，怎么设置可以减少带宽，还可以增加搜索引擎对网站的收录？

网站优化

好问题 1 评论收藏举报

AI智能回复搜索中，请稍后...

2 回答

阿北初级会员用户来自于: 安徽省阜阳市
2013-08-07 00:04

robots 没有办法，它本身就是禁止收录的命令。除非你是考虑网站定位问题，比如你并不希望通过百度图片获取流量，可以考虑屏蔽掉图片蜘蛛来节省带宽，依次类推其他类型的蜘蛛。除此之外可以考虑用 nofollow 来引导蜘蛛抓取重要的内容。内容较多可以参考： http://ask.seowhy.com/question/1544

赞同 2 0评论

gamebus 初级会员用户来自于: 北京市
2013-08-07 10:58

nofollow并不能阻止抓取，他的作用是不传递权重，蜘蛛依然会抓。 robots可以禁止效价比非常低的搜索蜘蛛抓取，还可以禁止不是搜索引擎的蜘蛛抓去，当然前提是这个蜘蛛遵守这个协议。比如这边禁止了某蜘蛛，此蜘蛛疯狂抓取，流量贡献却微乎其微，索性将其禁止。这样每个月至少节约了几个g的流量。 robots还可以引导蜘蛛，告诉他哪些可以抓，那些不能抓，这样也能节约一定的流量。想增加索引量，robots可以做的是，告诉蜘蛛你网站的地图在哪里，让蜘蛛去抓取地图。感觉质量高，数量多的内容才是提高索引量的根本。有兴趣的话，可以继续探讨这个问题。

赞同 0 0评论

关于作者

: itdazhu 注册会员
这家伙很懒，还没有设置简介

2: 回答

0: 文章

3: 问题

问题动态

发布时间: 2013-08-06 23:46

更新时间: 2013-08-07 10:58

关注人数: 5 人关注

相关问题

Bug：手机端第三方登录绑定，用户名提示“用户包含无效字符”请问怎么破？: 3043 浏览 5 关注 4 回答 0 评论

怎么最简单修改登入跳转到问题: 1935 浏览 2 关注 1 回答 0 评论

Anwsion可以导入discuz的帖子吗？可以导入指定版块的帖子吗？: 2728 浏览 4 关注 2 回答 0 评论

后台管理员账户管理权限没有了不能登录后台请问怎么恢复: 1384 浏览 4 关注 1 回答 0 评论

用户推荐下的排名怎么回事？: 2384 浏览 3 关注 1 回答 0 评论

微信自定义菜单命令设置详解: 6921 浏览 10 关注 4 回答 0 评论

现在我想做到一个微信服务号同时绑定WC跟口袋通，怎么办？: 1771 浏览 4 关注 1 回答 0 评论

模版怎么做啊: 2125 浏览 2 关注 0 回答 0 评论

我想把question2answer的注册用户导入anwsion，该怎么做: 2431 浏览 2 关注 1 回答 1 评论

官方有收费定制主题服务吗？或者有其他的朋友收费可以做的？主要是模仿其他的类似结构网站的CSS前端样式之类的: 1392 浏览 1 关注 0 回答 0 评论

推荐内容

问国内有没有英文版的邮件列表提供商？: 1839 浏览 3 关注 1 回答 0 评论

问做网站推广借用工具来做可以吗？: 2116 浏览 1 关注 0 回答 0 评论

问 anwsion程序访问速度需要优化: 3371 浏览 2 关注 1 回答 0 评论

问如何把访客变成客户使用着陆页？做网站的朋友必须看看: 2731 浏览 2 关注 1 回答 0 评论

问找人优化网站: 1328 浏览 1 关注 0 回答 0 评论

问找人优化网站: 2811 浏览 3 关注 2 回答 0 评论

问刚才进后台把网站地址和目录地址给改了，不过填写错了，在哪个文件里面改？: 2283 浏览 2 关注 2 回答 0 评论

问零基础新手怎么学习SEO？: 3540 浏览 1 关注 0 回答 0 评论

问小工具网站请大家给点建议: 3588 浏览 3 关注 1 回答 0 评论

问为何网址后面斜杠加问号的所有htm后缀的都可以打开呢？比如www.sefei.org/?hksfhdfjnskf.htm什么原因呢？: 1373 浏览 1 关注 0 回答 0 评论

All Rights Reserved Powered BY WeCenter V4.1.0 © 2024 皖公网安备 34019202000400号