点有大约 10,000 个页面，并且根据新的Moz Link Explorer的域权限为 72 和 22,670 个引用域。但是，该站点使用流行的 WordPress 插件，该插件将内容缩写为站点上的文章和页面，从类别页面上的文章中删除链接，并从侧边栏和页脚中删除大部分（如果不是全部）无关链接。这个特殊的插件被用于超过 200,000 个网站。那么，当我们使用Screaming Frog启动六级深度爬行时会发生什么？（这对这种分析非常有用，因为我们可以轻松更改用户代理并将设置限制为仅抓取 HTML 内容。） 差异令人震惊。首
先，请注意，在左侧的移动爬网中，每个页面的链接数量显然很少，并且随着您对网站的深入爬网，链接数量非常稳定。这就是产生如此稳定的指数增长曲线的原因。其次，请注意爬网在第四级突然结束。该网站没有更多页面可提供移动 客户名单 爬虫！在 Google 报告的约 10,000 页中，仅找到了约 3,000 页。 现在，将其与桌面爬虫进行比较。它在二级页面中爆炸式增长，仅在此级别收集的移动抓取页面总数几乎翻了一番。现在，回想一下图表，当我们爬取 20,000 个站点时，唯一的桌面页面比共享页面要多。这是对它发生
的确切方式的确认。最终，桌面爬虫可以在相同的爬取深度级别上使用 6 倍的内容。 但这对外部链接有什么影响？ 哇。75% 的外部、出站链接在移动版本中被剔除。在桌面版中发现了 4,905 个外部链接，而在移动版中仅发现了 1,162 个。请记住，这是一个 DA 72 站点，拥有超过两万个引用域。想象一下由于移动索引不再找到反向链接而丢失该链接。我们应该做什么？天要塌了吗？ 深呼吸 移动优先并非仅限移动 所有这些研究的第一个重要警告是谷歌并没有放弃桌面 - 他们只是优先考虑移动抓取。这是有道理的因