onebutton发表在 Linux面板2024-3-20 12:20 [复制链接] 8 1533
面板、插件版本:8.0.5
系统版本:cent7
问题描述:1.Linux面板2.Apache环境3.一台服务器上100多个网站4.垃圾蜘蛛:AhrefsBot、MJ12bot、dotbot、SemrushBot怎么设置Apache,让这台服务器上的100多个网站都禁止这些垃圾蜘蛛爬取?PS:可别一个一个的网站设置,这样太麻烦了,感谢管理员给予解答!
1.Linux面板
2.Apache环境
3.一台服务器上100多个网站
4.垃圾蜘蛛:AhrefsBot、MJ12bot、dotbot、SemrushBot
相关截图(日志、错误):
youxinge 发表于 2024-3-20 12:58 nginx有防火墙设置垃圾爬虫UA 另外可以开启人机校验:但是要自己收集一些 正常的搜索引擎蜘蛛IP段。宝塔也 ...
大炮运维V587 发表于 2024-3-20 14:30 您好,Apache防火墙中可以将这些蜘蛛UA添加到UA黑名单里。
onebutton 发表于 2024-3-20 14:38 8.0.5版本,Apache防火墙貌似没有免费版,你的意思是购买收费版Apache防火墙吗 ...
大炮运维V587 发表于 2024-3-20 16:25 是的,Apache防火墙不是免费的
onebutton 发表于 2024-3-26 18:30 已经购买Linux专业版,请问UA规则怎么添加
本版积分规则 发表回复 回帖后跳转到最后一页
论坛响应时间:72小时
问题处理方式:排队(仅解答)
工作时间:白班:9:00 - 18:00
响应时间:3分钟
问题处理方式:宝塔专家1对1服务
工作时间:工作日:9:00 - 18:30
宝塔专业团队为您解决服务器疑难问题