【待反馈】网站经常100%，检查日志发现大量这个访问，请...

网站经常100%，检查日志发现大量这个访问，请问这是爬虫还是什么呢？

18.220.245.184 - - [25/Aug/2024:00:48:29 +0800] ＂GET /plugin.php?ac=cat&cat_id=44&city=%E9%B9%A4%E5%B2%97%E5%B8%82&dist=%E5%8D%97%E5%B1%B1%E5%8C%BA&id=xigua_hb&orderby=zan&province=%E9%BB%91%E9%BE%99%E6%B1%9F%E7%9C%81&st=216 HTTP/2.0＂ 301 162 ＂-＂＂Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)＂

复制代码

gxb8272605 · 发表于 2024-8-25 00:52:28

请问一下如何禁止呢？防火墙来操作吗

gxb8272605 · 发表于 2024-8-25 01:04:38

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

运维技术阿闯 · 发表于 2024-8-26 09:16:07

您好，您这边是否都是这单独一个ip访问18.220.245.184呢
如果是的话，可以将ip拉入黑名单，这个是一个国外ip
以及您这边是否有plugin.php这个文件，没有的话，您这边做一个ua黑名单。

gxb8272605 · 发表于 2024-8-26 09:40:13

运维技术阿闯发表于 2024-8-26 09:16
您好，您这边是否都是这单独一个ip访问18.220.245.184呢
如果是的话，可以将ip拉入黑名单，这个是一个国外i ...

我看访问都是这样记录，Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)＂

如果做UA黑名单，只需要把ClaudeBot 这个词汇加入就行了是吧，我搜索了下这个是国外一个AI爬虫

运维技术阿闯 · 发表于 2024-8-26 12:17:34

gxb8272605 发表于 2024-8-26 09:40
我看访问都是这样记录，Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0 ...

您好，也是可以的

█ 菠萝云-免费装宝塔,4G内存68 █	█ 易探云·香港/美国vps仅9元 █	▅▆▇ 慈云数据-服务器9.9/月 ▇▆▅	4C4G500M带宽高防69元	【多途云】高防CDN
高防服务器，无视一切流量攻击	A7招租，联系qq394030111	OV/EV SSL证书，可当日签发	【阿里云】宝塔一键部署，5.5折	宝塔一键部署DV,EV,OV,SSL证书
█ 易探云·高防云4核8G仅88元 █	高防CDN全球节点99元	█香港站群新年大促█ 免费试用 █	【阿里云】2核2G，3M，45.1元/年	在线网站测速、批量PING运维工具