该问题已被锁定!
5
关注
3764
浏览

增加一个反爬虫的功能吧

AI智能回复搜索中,请稍后...

查看全部 3 个回答

cooldev 初级会员 用户来自于: 英国
2020-12-23 22:16

你可以简单通过iptables和fail2ban来控制用户的爬虫频率。
例如:如果一个ip地址在5秒钟内访问网站有20次, 你就可以通过iptables和fail2ban 禁止掉这个ip的访问。

关于作者

问题动态

发布时间
2020-12-02 11:08
更新时间
2020-12-23 22:16
关注人数
5 人关注

推荐内容

可以模仿一下知乎的分类模式
社区型网站的方向
win2008的系统,iis7.5web服务器,3.1.4的wencenter,请教如何伪静态。
能不能收藏文章啊?
问答页中编辑话题的权限为什么不能在后台设置呢?
关于如何规避空间商过滤关键字的问题?
是否可以实现wecenter注册用户同步到ucenter?还有个小小的建议和一个bug
关于图片间距问题,是否能改良一下呢?
官网刚刚数据库报错的,看图
建议加入附近问题功能