有两个趋势影响了谷歌的索引方式。随着开放网页的缩减,谷歌需要通过像YouTube、Reddit和TikTok这样的大型内容平台来发现新内容,而这些平台通常建立在“复杂”的JS框架上。同时,AI正在通过使得平庸和劣质内容不再必要,改变网络的基础动态。
在我与一些全球最大的网站合作时,最近注意到了一个倒置关系,即索引的页面数与自然流量之间的关系。更多的页面并不自动意味着不好,但往往不符合谷歌的质量期望。换句话说,质量的定义已经改变。对于SEO来说,风险很高:扩张过于激进,整个域名可能会受到影响。我们需要改变对质量的心态,并开发监控系统,帮助我们理解页面级别的域名质量。
满足
谷歌从2023年10月开始改变它对域名的处理方式:在10月之前没有任何倒置关系的例子。此外,当他们发布2023年10月的核心算法更新时,谷歌也遇到了索引问题,就像现在2024年8月更新时一样。
在变化之前,谷歌会索引所有内容,并优先考虑域名上的最高质量内容。可以将其比作淘金,你会用泥沙和水填满一个盘子,然后旋转直到只剩下有价值的材料。
现在,一个域名及其内容需要在谷歌尝试挖掘黄金之前证明自己。如果域名上有太多低质量内容,谷歌可能只会索引部分页面,甚至在极端情况下完全不索引。
一个例子是doordash.com,在过去12个月内增加了许多页面,但其自然流量有所减少。至少部分,可能全部,新页面未能满足谷歌的质量期望。
图片来源: Kevin Indig
但为什么会这样呢?发生了什么变化?我的推理是:
- 随着公司转向运营效率思维,谷歌希望节省资源和成本。
- 部分索引更有效地对抗低质量内容和垃圾信息。与其索引后再尝试对域名的新页面进行排名,谷歌观察整个域名的整体质量,并对新页面持相应的怀疑态度。
- 如果一个域名反复产生低质量内容,它就没有机会进一步污染谷歌的索引。
- 由于网络上内容的增加,同时为了优化其索引以适应RAG(基于AI概述)并训练模型,谷歌对质量的要求提高了。
这种将域名质量作为信号的重视意味着你必须改变监控网站质量的方式。我的指导原则是:“如果你不能向网络添加任何新或更好的东西,那么它很可能不够好。”
优质食品
域名质量是我用来描述符合谷歌质量标准的已索引页面的比例。注意,只有已索引的页面才算质量。谷歌在减少域名流量之前允许的“差”页面的最大百分比尚不明确,但我们可以肯定地看到其实现时候:
图片来源: Kevin Indig
图片来源: Kevin Indig
图片来源: Kevin Indig
我将域名质量定义为由三个方面组成的信号:用户体验、内容质量和技术状况:
- 用户体验:用户能否找到他们在寻找的东西?
- 内容质量:信息增益,内容设计,全面性
- 技术优化:重复内容,渲染,页面内内容用于上下文,“ 已抓取, 未索引/已发现”,软404页面
重复内容的一个例子(图片来源:Kevin Indig)
索引页面数量的突然激增通常表明存在技术问题,例如参数重复内容、国际化问题,或分页逻辑故障。在下面的例子中,当分页逻辑发生故障导致大量重复内容时,谷歌立即减少了这一域名的自然流量。我从未见过谷歌对技术故障反应如此迅速,但这就是我们当前所处的SEO新状态。
图片来源:Kevin Indig
在其他情况下,索引页面数量的激增表明该域名在同一模板上大量发布页面。当程序化页面的内容质量不够好时,谷歌会迅速关闭流量来源。
图片来源:Kevin Indig
图片来源:Kevin Indig
作为回应,谷歌通常会减少排名在前3位中的关键词数量。其他位置的关键词数量则相对稳定。
图片来源:Kevin Indig
图片来源:Kevin Indig
图片来源:Kevin Indig
规模扩大问题:域名质量对较大的网站来说可能是一个更大的问题,尽管较小的网站也可能受到影响。
增加新页面本身并不是坏事。你只需谨慎对待。例如,发布不直接针对某个关键词的新领导思想或产品营销内容仍然对网站访客非常有价值。这就是为什么在SEO指标之上衡量参与度和用户满意度是至关重要的。
饮食计划
保持“脂肪”(低质量页)不增并减少被核心更新打击的风险的最关键方法是建立正确的监控系统。你无法改进你不测量的东西。
域名质量监控系统的核心是一个仪表盘,它跟踪每个页面的指标并将其与平均值进行比较。如果只能选择三个指标,我会测量反跳出率(inverse bounce rate)、转化率(软和硬转化),以及每页按页面类型的点击数和排名。理想情况下,你的系统应在抓取率激增时,尤其是对之前未被抓取的新页面时,发出警报。
正如我在《最佳公司如何衡量内容质量》中写的:
1/ 对于生产质量,测量如SEO编辑评分、Flesch/可读性评分或拼写/语法错误数等指标
2/ 对于性能质量,测量如前3名排名数量、页面停留时间与预估阅读时间的比率、反跳出率、滚动深度或管道价值等指标
3/ 对于保存质量,测量随着时间推移的性能指标以及年同比变化
在监控网站时,忽略服务条款或关于我们的页面,因为它们的功能与SEO无关。
增长阶段
监控是了解你的网站域名质量的第一步。你并不总是需要添加更多页面来增长。通常,你可以通过优化现有页面来提升,但首先你需要一个监控系统来搞清楚这一点。
阿迪达斯是一个很好的例子,它仅通过优化现有页面就能增加自然流量。
图片来源:Kevin Indig
另一个例子是Redfin,它在保持页面数量稳定的同时大幅增加了自然流量。
图片来源:Kevin Indig
引用产品增长高级总监在我的Redfin 深度解析中关于达标质量的发言:
将我们的本地专业知识带到网站上——成为房地产市场的权威,回答在某个区域生活的体验,提供全美范围内的完整买卖和租赁库存。
保持技术卓越——我们的网站很大(超过1亿页面),所以我们不能在性能、爬网健康和数据质量方面偷懒。有时最不起眼的努力可能是最具影响力的。
像Lending Tree或Progressive这样的公司,通过减少不符合质量标准的页面,实现了显著的增长(请参见下方截图)。
Progressive将代理页面移到一个单独的域名中,以提高主要域名的质量。 (图片来源:Kevin Indig)
LendingTree削减了大量低质量页面,以推动自然流量增长。 (图片来源:Kevin Indig)
结论
谷歌会奖励那些保持良好状态的网站。2020年,我写过一篇关于谷歌的索引可能比我们想象的更小且可能不会增长的文章。早期,索引规模曾是一个目标。但今天,关键点不在于索引尽可能多的页面,而在于拥有合适的页面。“好”页面的定义已经演变。谷歌对允许进入“俱乐部”的标准更为挑剔。
在同一篇文章中,我提出谷歌可能会转向索引API,让网站所有者自己负责索引管理。这尚未实现,但可以说谷歌正在更广泛地使用API进行索引:
- 谷歌和Reddit之间的每年60美元的协议,为谷歌提供了其搜索结果的十分之一(假设Reddit几乎在每个关键词的前10位都有出现)。
- 在电商领域,其中更多自然列表出现在搜索结果的顶部,谷歌更依赖Merchant Center中的产品流来索引新产品并优化其购物图谱。
- 像Top Stories这样的SERP功能在新闻行业至关重要,这些是具有自身索引逻辑的小型服务。
展望未来,当更多用户通过AI概览和AI聊天机器人进行搜索时,关于索引的重大问题在于其将如何演变。假设大型语言模型(LLMs)仍需能够呈现页面,技术SEO工作仍然至关重要——然而,索引的动机将从呈现网页结果转变为训练模型。因此,内容无新意的页面的价值将比今天更趋近于零。
总结:
随着互联网环境的不断变化,谷歌已经调整了其索引策略,更加注重内容的质量而非数量。过去,谷歌会索引所有内容并优先考虑域名上的最高质量内容,但如今,低质量内容将导致谷歌索引的网站页面减少,甚至完全不索引。对于SEO策略而言,这意味着网站需要严格监控其内容质量并采用更优化的方法,以防止流量损失。机构和企业必须通过提升用户体验、内容质量和技术优化来满足谷歌的质控标准。此外,监控网页质量的系统变得尤为重要,以及时发现并解决潜在问题。举例来说,像doordash.com这样的网站,由于新页面未能达到谷歌的质量期望,自然流量有所下降。为确保不被谷歌核心算法更新影响,减少低质量页面并优化现有页面显得尤为关键。
用光年AI,轻松提升私域流量转化率,赢得市场先机!光年AI不仅能帮助您监控和优化网站内容质量,还能通过智能分析提升私域流量的精准度和转化率。选择光年AI,让您的私域流量增长无忧,助您打造私域流量闭环,实现长期收益。