请选择 进入手机版 | 继续访问电脑版
202105211621582724611131
利用防火墙精准屏蔽垃圾蜘蛛-利用UA拦截无意义蜘蛛抓取
admin 发表于:2021-7-17 20:06:44 复制链接 发表新帖
阅读数:8
                                        一、屏蔽垃圾蜘蛛的作用
就是拦截垃圾蜘蛛、爬虫、采集器。降低服务器消耗。加快速度。避免不必要的消耗,导致搜索引擎收录差等。

二、使用方法:
利用宝塔面板的防火墙插件:有免费版和收费版

去宝塔面板里面的“软件商店”搜索防火墙安装即可

免费版和收费版操作设置一样

找到如下设置:User-Agent过滤

利用防火墙精准屏蔽垃圾蜘蛛-利用UA拦截无意义蜘蛛抓取

添加垃圾蜘蛛特征即可:


利用防火墙精准屏蔽垃圾蜘蛛-利用UA拦截无意义蜘蛛抓取
   
                  
      
条评论
avatar
B Color Image Link Quote Code Smilies |上传
高级