当前位置:论坛首页 > Linux面板 > 求助

恶意爬虫屏蔽无效,请教如何设置

发表在 Linux面板2025-1-2 11:16 [复制链接] 3 161

为了能快速了解并处理您的问题,请提供以下基础信息:
面板、插件版本:9.3
系统版本:
问题描述:Bytespider 爬虫屏蔽补丁
相关截图(日志、错误):

没有flash 上传不了图片,下面是访问日志

110.249.202.130 - - [02/Jan/2025:11:07:49 +0800] "GET /thread-479-2-24.html HTTP/2.0" 200 24425 "-" "Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)"
110.249.202.186 - - [02/Jan/2025:11:07:49 +0800] "GET /thread-289-2-90.html HTTP/2.0" 200 24604 "-" "Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)"
111.225.148.156 - - [02/Jan/2025:11:07:49 +0800] "GET /thread-635-1-96.html HTTP/2.0" 200 27558 "-" "Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider; https://zhanzhang.toutiao.com/)"
110.249.201.115 - - [02/Jan/2025:11:07:49 +0800] "GET /thread-394-2-59.html HTTP/2.0" 200 24476 "-" "Mozilla/5.0 (Linux; Android 5.0) AppleWebKit/537.36 (KHTML, like Gecko) Mobile Safari/537.36 (compatible; Bytespider;




在防火墙的 恶意爬虫防御里设置




(WPScan|HTTrack|antSword|harvest|audit|dirbuster|pangolin|nmap|sqln|hydra|Parser|libwww|BBBike|sqlmap|w3af|owasp|Nikto|fimap|havij|zmeu|BabyKrokodil|netsparker|httperf|SM-G900P|DataForSeoBot|DotBot|AwarioBot|Bytespider|MI 9|OPPO R9sk|MB200|Amazonbot|COL-AL10|V1924A|SM-G981B|V1981A|Pixel 5|BLEXBot|SM-A102U|SM-N960U|SM-A205U|LM-Q710(FGN)|SkyworkSpider|Applebot|AhrefsBot| SF/)



依旧是可以正常访问,是不是哪里设置错误,要怎么屏蔽这个爬虫呢,感谢!
使用道具 举报 只看该作者 回复
发表于 2025-1-2 18:11:01 | 显示全部楼层
你直接加入到UA黑名单中
使用道具 举报 回复 支持 反对
发表于 2025-1-2 19:22:55 | 显示全部楼层
宝塔技术-小强 发表于 2025-1-2 18:11
你直接加入到UA黑名单中

不知道在哪里加啊,麻烦能告诉我一下吗
使用道具 举报 回复 支持 反对
发表于 2025-1-2 20:53:52 | 显示全部楼层
推荐用百度云防护WAF拦截
使用道具 举报 回复 支持 反对
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

普通问题处理

论坛响应时间:72小时

问题处理方式:排队(仅解答)

工作时间:白班:9:00 - 18:00

紧急运维服务

响应时间:3分钟

问题处理方式:宝塔专家1对1服务

工作时间:工作日:9:00 - 18:30

宝塔专业团队为您解决服务器疑难问题

立即付费处理

工作时间:09:00至24:00

快速回复 返回顶部 返回列表