Screaming Frog无疑是 SEO 专家最喜欢的工具之一。免费版本允许您抓取网站最多 500 个子页面。运行扫描后，您可以在“状态代码”列中看到服务器的响应代码，从而找到出现 404 错误的页面。另一个可以提供帮助的解决方案是 Sitebulb，这是一个完全付费的选项。但是，您可以通过 14 天免费试用试用它。
screamingfrog 错误
来源：Screaming Frog
Ahrefs - 在我看来，它是一个简单而有用的工具，可以从 SEO 的 中国泰国数据 角度分析页面，特别是在链接建设的情况下，但我有一天会写更多关于它的内容。:) Ahrefs 允许您安排定期网站审核以查找各种错误，包括 404 错误。
软错误 404 – 听起来无害，但意味着麻烦
在分析您的网站时，您可能会遇到 Google Search Console 中描述的错误，即“提交的 URL 似乎是软 404 ”。这是什么意思？子页面不存在，但浏览器仍收到状态代码 200。还会发生向用户显示内容很少或几乎为空的页面的情况。这样的结果将在搜索结果中被编入索引，这意味着 Google 机器人不会索引我们希望它索引的现有页面，而是返回不存在的子页面并一次又一次地尝试对其进行索引。因此，我们会在用户和机器人都无法访问的子页面上失去抓取预算。