它们可能包含大量长期删除的 URL

[mehadihasan123456]

分析服务器日志。 它可以让您了解 Google 机器人如何导航您的网站。它们值得研究，这样您的爬行预算就不会被浪费。通过这种方式，您可以找到搜索机器人访问过但返回404的页面。 用于日志分析的工具之一是 Screaming Frog。最好在最近 30 天内导入。 还使用文件日志分析器工具。这很直观。下载日志后，您可以看到服务器响应代码分布的图表。要进行更详细的分析，您应该转到 URL 选项卡。将提供有关机器人访问网站的频率以及它们返回的代码状态的信息。


作为分析的一部分，还值得仔细查看触发 301 服务器响应的页面，因为它们可能会重定向到具有 404 服务器响应的页面或导致循环重定向。 地图.xml。 还建议检查站点地图是否存在 404 错误，这对于站点地图不会自动更新的资荷兰电报数据 源尤其重要。站点地图内容信息可以在 GSC 中轻松验证。但是，在此工具中，您必须首先提供 .xml 地图 URL。该报告将显示发送或索引状态。如果站点地图处理成功，您可以在索引中查看其状态，然后分析存在错误或异常的部分。


谷歌分析。 返回 404 状态的子页面也可以使用 Google Analytics 进行跟踪。但是，此工具只会显示用户尝试访问的损坏/删除的子页面。要跟踪它们，您可以在 Google 跟踪代码管理器 (GTM) 中设置特殊规则。每次用户登陆错误页面时它都会触发。 修复 404 错误的方法 所有非工作页面必须上传到 Excel 文件。由于数据是从不同来源收集的，因此很可能会重复，甚至可能不止一次。您可以使用 Excel 的内置“删除重复项”功能来删除它们。