Google 的搜索关系团队揭示,高质量、以用户为中心的内容是增加抓取需求、揭穿抓取预算神话的关键:
网站没有必须遵守的固定抓取预算。
Google 根据内容质量优先抓取
专注于制作高质量、以用户为中心的内容是增加爬行的最佳方式。
SEO 专业人士长期以来一直在讨论“抓取预算”的概念,它是指搜索引擎每天可以抓取的页面数量有限。假设网站必须保持在分配的预算范围内才能将页面编入索引。然而,在最近的播客中,谷歌的搜索关系团队揭穿了有关抓取预算的误解,并解释了谷歌如何优先考虑抓取。
Googlebot 如何确定抓取的优先级?
SEO 顾问兼 Google 产品专家 Dave Smart 承认围绕抓取预算的混乱:
“我认为关于爬行,关于它是什么、不是什么,存在着很多误解。像爬行预算和你听到的短语之类的东西可能会让人们感到非常困惑。”
Gary Illyes(Google 搜索团队的分析师)回答了Dave Smart一个问题:
“好的。我会反过来问你,如果你操作一个爬虫,你会如何决定要获取什么?”
SEO 顾问 David Smart 回应道:
“你需要通过查看已知的信息,找到开始的地方来做到这一点。从那里,你得到链接和东西,然后你会尝试确定什么是重要的,现在就去获取,也许什么可以等到以后,也许什么根本不重要。”
Gary Illyes通过解释搜索需求的作用,详细阐述了 Google 如何决定抓取多少内容。他是这样说的:
“一个是调度程序,它基本上说我想抓取这个。但这也是由搜索的一些反馈控制的。如果搜索需求下降,那么这也与爬行限制下降相关。”
Gary没有解释“搜索需求”一词的含义。但他整个声明的背景是从谷歌的角度来看的。所以从谷歌的角度来看,“搜索需求”可能意味着搜索查询需求。搜索查询需求是有道理的,因为如果没有人搜索 Cabbage Patch Kids,那么 Google 就没有理由抓取有关 Cabbage Patch Kids 的网站。但同样,Gary没有解释“搜索需求”的含义,因此我们必须从该短语的上下文中来看待它。Gary用这句话结束了他对这个话题的思考:
“因此,如果你想增加我们的抓取量,那么你必须以某种方式让搜索相信你的东西值得获取,这基本上就是调度程序正在监听的内容。”
Gary没有详细说明他所说的“让搜索相信你的东西值得获取”的含义,但一种解释可能是确保它与用户趋势相关,这意味着保持最新状态。
注重质量和用户体验
那么,网站可以采取什么措施来确保其页面被有效地抓取和索引呢?答案在于关注网站质量。正如Gary所说:
“日程安排非常动态。一旦我们从搜索索引中得到信号,表明这么多 URL 的内容质量有所提高,我们就会开始增加需求。”通过不断提高页面质量和内容对搜索者的实用性,您可以克服任何假定的爬行限制。关键是分析网站的性能,确定需要改进的领域,并专注于为目标受众提供尽可能最佳的体验。
总之,谷歌最近的见解澄清了固定的“抓取预算”在很大程度上是一个神话。相反,搜索引擎的抓取决策是动态的,并由内容质量和搜索需求驱动。通过优先考虑质量、相关性和用户体验,网站所有者可以确保他们有价值的页面被 Google 发现、抓取和索引,而不必担心达到任意限制。
常问问题
抓取预算的概念如何影响 SEO 策略?
SEO 专业人士讨论了抓取预算的概念,认为每天抓取的页面数量保持在一定限度内至关重要。然而,谷歌的搜索工程师澄清说,没有网站必须遵守的固定抓取预算。相反,Google 根据内容质量和用户交互信号优先进行抓取。因此,SEO 策略应将重点从管理抓取预算转向优化高质量、以用户为中心的内容,以增加有效抓取和索引的机会。
哪些因素会影响 Googlebot 抓取网页的优先级?
尽管 Gary Illyes 提到搜索需求发挥了一定作用(这可能是对搜索查询需求的参考),但一系列动态因素会影响 Googlebot 抓取网页的优先级,主要是内容质量。
营销人员可以通过哪些方式增强网站内容的可抓取性?
希望提高网站可抓取性的营销人员应重点关注以下方面:
制作内容丰富、相关且吸引目标受众的高质量内容。
确保网站提供卓越的用户体验、快速的加载时间、移动设备友好性和导航便捷性。
从信誉良好的来源获得自然反向链接,以提高搜索引擎的可信度和可见性。
定期更新内容以反映最新信息、趋势和用户需求。