的问题 - 您可以单击“查看更多”以显示按需抓取跟踪的所有问题(前两个栏已被截断)... 问题也按类别进行颜色编码。有些项目是警告,它们是否重要取决于上下文。其他问题,例如“严重错误”(红色)几乎总是需要关注。那么,让我们来看看那些 404 错误。向下滚动,您将看到带有过滤器的“已抓取页面”列表。您将在“状态代码”下拉列表中选择“4xx”... 然后,您可以很容易地抽查这些 URL,并发现它们确实似乎返回了 404 错误。有些似乎是具有内部或外部链接(或两者兼有)的合法内容。因此,几分钟之内,您就已经发现了一些有用的东西。 接下来让我们看看那些黄色的“Meta Noindex”错误。这是一个棘手的问题,因为您无法轻易确定意图。有意的 Meta Noindex 可能没问题。一个无意的(或数百个无意的)可能会阻止爬虫并造成严重伤害。在这里,您将按问题类型过滤... 与上图一样,问题按流行程度排列。
您还可以按所有有问题(任何问题)的页面或没有问题的页面进行过滤。这是您返回的示例(完整表格还包括状态代码、问题计数和查看所有问题的选项)... 请注 号码表 意所有这些 URL 共有的“?s=”。点击几个,你可以看到这些是内部搜索页面。这些 URL 没有特定的 SEO 价值,Meta Noindex 可能是故意的。良好的技术搜索引擎优化也是为了避免误报,因为您缺乏对网站的内部了解。On-Demand Crawl 可帮助您半自动化和总结洞察力,让您的人工智能快速发挥作用。
深入了解出口 让我们回到那些 404。理想情况下,您想知道这些 URL 显示在哪里。我们无法将所有内容都放在一个屏幕中,但如果您向上滚动到“所有问题”图表,您会看到“导出 CSV”选项... 导出将遵循页面列表中设置的任何过滤器,因此让我们重新应用“4xx”过滤器并提取数据。您的导出文件应该几乎立即下载。完整的导出包含大量信息,但我已经将注意力集中在这个特殊案例的关键点上...... 现在,您不仅知道缺少哪些页面,还知道它们从内部链接的确切位置,并且可以轻松地将建议的修复传递给客户或潜在客户。其中一些结果是链接繁重的页面,可能会从一些清理或更新中受益(如果新的食谱很合适)。