Google 分享 Googlebot 背后的技术细节
Posted: Mon Jan 27, 2025 7:27 am
技术 SEO | 搜索引擎 | 高级 SEO
作者的观点完全是他们自己的（不包括催眠的不太可能发生的情况）并且可能并不总是反映 Moz 的观点。
抓取和索引编制是过去几年的热门话题。谷歌推出 Google Panda 后，人们立即查看服务器日志和抓取统计数据，开始修复索引膨胀问题。几年前的“SEO = 反向链接”时代不存在所有这些问题。随着技术 SEO 的迅猛发展，我们需要越来越技术化。话虽如此，我们仍然不知道谷歌究竟是如何抓取我们的网站的。许多 SEO 人员仍然无法区分抓取和索引编制。
然而，最大的问题是，当我们想要 股东数据库 解决索引问题时，我们唯一的工具就是Google Search Console 和抓取和渲染工具。一旦您的网站包含 HTML 和 CSS 以外的内容，您就需要对 Google 如何索引您的内容进行大量猜测。这种方法风险大、成本高，而且可能会多次失败。即使您发现了网站中未正确索引的部分，也很难找出问题的根源并找到导致索引问题的代码片段。
幸运的是，这种情况即将改变。最近，谷歌的 Ilya Grigorik 分享了有关爬虫工作原理的最有价值的见解之一：
有趣的是，这条推文并没有像我预期的那样引起关注。
那么 Ilya 在这条推文中的启示对于 SEO 意味着什么呢？
知道 Chrome 41 是 Web 渲染服务背后的技术，这是一件改变游戏规则的事情。在此公告发布之前，我们唯一的解决方案是使用 Google Search Console 中的 Fetch and Render 查看由网站渲染服务 (WRS) 渲染的页面。这意味着我们可以解决技术问题，否则需要进行试验和创建暂存环境。现在，您需要做的就是下载并安装 Chrome 41，以查看您的网站在浏览器中的加载情况。就是这样。
作者的观点完全是他们自己的（不包括催眠的不太可能发生的情况）并且可能并不总是反映 Moz 的观点。
抓取和索引编制是过去几年的热门话题。谷歌推出 Google Panda 后，人们立即查看服务器日志和抓取统计数据，开始修复索引膨胀问题。几年前的“SEO = 反向链接”时代不存在所有这些问题。随着技术 SEO 的迅猛发展，我们需要越来越技术化。话虽如此，我们仍然不知道谷歌究竟是如何抓取我们的网站的。许多 SEO 人员仍然无法区分抓取和索引编制。
然而，最大的问题是，当我们想要 股东数据库 解决索引问题时，我们唯一的工具就是Google Search Console 和抓取和渲染工具。一旦您的网站包含 HTML 和 CSS 以外的内容，您就需要对 Google 如何索引您的内容进行大量猜测。这种方法风险大、成本高，而且可能会多次失败。即使您发现了网站中未正确索引的部分，也很难找出问题的根源并找到导致索引问题的代码片段。
幸运的是，这种情况即将改变。最近，谷歌的 Ilya Grigorik 分享了有关爬虫工作原理的最有价值的见解之一：
有趣的是，这条推文并没有像我预期的那样引起关注。
那么 Ilya 在这条推文中的启示对于 SEO 意味着什么呢？
知道 Chrome 41 是 Web 渲染服务背后的技术，这是一件改变游戏规则的事情。在此公告发布之前，我们唯一的解决方案是使用 Google Search Console 中的 Fetch and Render 查看由网站渲染服务 (WRS) 渲染的页面。这意味着我们可以解决技术问题，否则需要进行试验和创建暂存环境。现在，您需要做的就是下载并安装 Chrome 41，以查看您的网站在浏览器中的加载情况。就是这样。