sitemap.xml 文件使爬虫更容易发现您网站上的页面。 您的 sitemap.xml 文件中应该只包含为您的访问者准备的好页面。
如果您的 sitemap.xml 包含以下 URL，则会触发此错误：
- 导致具有相同内容的网页
- 重定向到不同的网页
- 返回非 200 状态码
使用此类 URL 填充您的文件会混淆搜索引擎，导致不必要的抓取，甚至可能导致您的站点地图被拒绝。
如何修复它
查看您的 sitemap.xml 中是否有任何重定向的、非规范的或非 200 的 URL。 提供规范的最终目标 URL 并返回 200 状态代码。
类别：可抓取性
没有评论:
发表评论
注意：只有此博客的成员才能发布评论。