【待反馈】360蜘蛛太sb了要不不来，要么一来一秒几万个持

360蜘蛛太sb了要不不来，要么一来一秒几万个持续2小时

什么样的服务器能顶住？你们怎么搞的？

我屏蔽了一部分ip但是这样屏蔽了等他刷完后，以后再来ip就黑名单了也无法采集我站

怎么破？？

不屏蔽服务器挂了，屏蔽等这个2小时过了 ip在来就拒绝访问，我也不能天天盯着，来了就屏蔽不来就打开

大饼爱小饼 · 发表于 2024-9-15 15:53:47

这些蜘蛛没有价值

大炮运维V587 · 发表于 2024-9-15 16:52:50

您好，这个暂时没有好的解决方案

Diiamo · 发表于 2024-9-15 16:53:06

robots 能限制不？安装防火墙设置UA黑名单也行

运维技术阿闯 · 发表于 2024-9-18 10:29:56

您好，请参考大炮的回答

BAOt啊 · 发表于 2024-9-26 15:31:19

360全部拉黑了ua ip 禁止都做了不让来了受不了 48核心325G服务器一秒几万蜘蛛直接干死

运维技术阿闯 · 发表于 2024-10-17 18:24:25

这个没办法，除非您不让他来

824144512 · 发表于 2025-2-27 09:50:44

感觉防火墙应该可以设置个规则，专门限制这种突发大批量蜘蛛访问的情况，根据服务器配置限制放行蜘蛛数量，我的网站也是这样，360以下就来几万的蜘蛛，一个网站放在8h8g的服务器上也直接被干废。

BAOt啊 · 发表于 2025-2-27 13:10:34

824144512 发表于 2025-2-27 09:50
感觉防火墙应该可以设置个规则，专门限制这种突发大批量蜘蛛访问的情况，根据服务器配置限制放行蜘蛛数量， ...

我的64核心128G 360蜘蛛30分钟45万
服务器直接冒烟