宝塔用户_ehgxrf 发表于 2023-7-25 11:15:43

【待反馈】sitemap抓取失败

为了能快速了解并处理您的问题,请提供以下基础信息:面板、插件版本:
是宝塔哪个插件影响   我把防火墙、防篡改、加固 都关了还是不行
系统版本:
问题描述:
相关截图(日志、错误):

谢花郎 发表于 2023-7-25 14:21:02

您好,以下是整理的一些导致抓取失败的原因:
1.确保提供的sitemap URL 是有效的,并且可以在浏览器中访问。有时候URL拼写错误或者提供的URL不正确,导致抓取失败
2.sitemap 符合sitemap协议(XML格式),并且没有任何错误。您可以通过访问sitemap URL并查看其内容,确保它是一个正确格式的XML文档
3.检查网站的robots.txt文件,确保没有禁止搜索引擎抓取sitemap的规则。有时候,网站的robots.txt文件中可能会限制搜索引擎对sitemap的访问

如果插件这些都已关闭还是无法正常抓取,建议您结合网站日志进行一个排查
页: [1]
查看完整版本: 【待反馈】sitemap抓取失败