宝塔用户_nlnkpc 发表于 2024-9-1 00:11:34

【待反馈】很多国外的蜘蛛一直再抓取不存在的链接是怎

为了能快速了解并处理您的问题，请提供以下基础信息：面板、插件版本：
系统版本：
问题描述：很多国外的蜘蛛一直再抓取不存在的链接是怎么回事，点击封禁也会再来是怎么回事呢
相关截图（日志、错误）：

运维技术阿闯 发表于 2024-9-2 09:18:58

您好，这个是蜘蛛爬取的不存在的情况，正常现象，可以看到，您这边的蜘蛛访问为404，您是否将蜘蛛的ip段放进白名单呢
页: [1]
查看完整版本: 【待反馈】很多国外的蜘蛛一直再抓取不存在的链接是怎