首页 » 因此抓取测试可能需要几

因此抓取测试可能需要几

一个强大的网站永远不会宕机,并且可以不间断地为用户提供他们所需要的内容。

我们将使用 Moz Pro 中的 Moz Crawl Test 来完成这项机器人作业,并开始收集最多 3,000 个页面的数据。

像您对尖叫的青蛙所做的那样

进入您的网站,然后单击“抓取此 URL”。

我们的小看护机器人 Roger 会确保您的网站不会变慢,个小时才能完成。但它值得等待,完成后您会收到一封电子邮件。

抓取报告有效期为 90 天,因此请导出该 CSV 并保存,以便我们可以执行一些 Excel 魔法。我们稍后会用到这个 CSV,因此请妥善保管。

在 Excel 中,按“HTTP 状态”对结果 卡塔尔电话号码数据 进行排序,以查找那些包含脏 500、意外 404 和被遗忘的 302 的讨厌的页面。

是服务器错误它们可能是暂时的

但最好与您的主人核实一下到底发生了什么。

400表示页面有问题。在您的后端检查此页面。如果此页面已更改位置,您可能需要设置 301 重定向。

300表示某种重定向。了解 302 和 301 之间的区别。

302 偶然,301 独立。

将其铭记在心,在锻炼时吟诵它,在晚宴上 如何让您的电子邮件营销脱颖而出 拿出来给你的客人留下深刻印象。无论需要付出什么代价。这是很基础的,作为网站经理、营销人员、在线业务所有者或新兴的 SEO…您应该知道其中的区别。

如果您不尽快修复这些错误

尤其是在高流量页面上,您会让我、Bonnie 和您的潜在客户失望的。

现在您已经掌握了详细信息,您可以用 Header Checker 工具深入挖掘以查找任何规范化错误或重定向循环。这在浏览器上看起来可能不算太糟糕,但对于机器人来说却可能是个坏消息。

将所有 URL 组合)输入到此状态检查工具中:

将鼠标悬停在重定向上以检查它们是否都指向正确的 URL。

301 全部指向同一个地方。现在您知道我们在寻找什么了,让我们看看当好网站变坏时会发生什么……

下面的站点一开始运行正常,但随后我们看到 俄罗斯号码列表  一个错误,而且看起来我们有两个可访问的 URL 版本。看到那 200 个状态代码了吗?它们通常意味着我们都是好人,人们可以访问此页面,但在这种情况下,情况就不那么好了。允许机器人和人类同时从两个 URL 访问您的网站()被称为“规范化错误”。

快速说 5 遍,因为这是规范化错误带来的唯一乐趣。

滚动至顶部