【已回应】网站监控报表增加百度蜘蛛IP识别
示例:增加功能:Linux服务器网站监控报表增加百度搜狗等蜘蛛IP识别
需求描述:目前这个软件功能很好,可以很好的看到搜索引擎蜘蛛来访情况,但是有些软件采集我的内容,会用假的百度蜘蛛UA,导致软件后台看到的蜘蛛数量极其不合理,所以建议增加真假蜘蛛识别功能,搜索引擎的蜘蛛IP段就那么几个,希望能够加以识别,否则这个功能就是个鸡肋了,没有什么用
本来就是挺鸡肋的。 假蜘蛛现在做了验证,不会被统计的。 大炮运维V587 发表于 2019-12-26 15:59
假蜘蛛现在做了验证,不会被统计的。
做了验证?什么意思,意思是目前这个假蜘蛛问题已经解决了对吗 也就是说 ,目前蜘蛛统计的数量都是正确的?感谢官方回复 饭饭饭饭fan 发表于 2019-12-26 16:06
也就是说 ,目前蜘蛛统计的数量都是正确的?感谢官方回复
假蜘蛛不统计的,已经根据ua和请求类型做过判断了 666 还能过滤假蜘蛛了 假蜘蛛,流氓蜘蛛..........最烦,跟cc没差了 大炮运维V587 发表于 2019-12-26 18:03
假蜘蛛不统计的,已经根据ua和请求类型做过判断了
准确的说,假蜘蛛不能通过UA和请求类型来判断,只能通过蜘蛛官方的IP段来判断。真假蜘蛛区分的功能目前还在计划中。
页:
[1]