
GEO效果为什么总对不上?提及率的三个口径陷阱
自研 AI 效果度量模型 · 指标可设定可追踪 · 非品牌词口径
GEO 项目验收时最常见的争议,不是"有没有效果",而是"这个数字怎么算出来的"。
同一个项目,换一种算法,提及率可以从 10% 变成 40%。这不是造假,是口径差异。
三个陷阱,逐个拆。
陷阱一:品牌词没有剔除
用户提问分两类:
品牌词提问:"XX 品牌怎么样""XX 是做什么的"
非品牌词提问:"GEO 服务商哪家好""AI 视频平台怎么选"
品牌词提问下,AI 几乎必然提到该品牌——用户问的就是它。这类提问的提及率天然趋近 100%。
关键问题在于:竞品没有对应的品牌词提问。 所以一旦把品牌词计入分母,这个数字既被抬高,又无法横向比较。
正确做法:效果考核用非品牌词口径,品牌词提问单独设为"品牌在场度"指标,两者不混用。
在为客户做基线诊断时经常遇到:某品牌全样本提及率看起来能到 40% 以上,剔除品牌词后只剩 10% 左右。如果不注明口径,两个数字都能"真实"地对外讲。
陷阱二:分母和样本没统一
即使都用非品牌词口径,样本设计不同,结果仍不可比。
| 项目 | 要确认什么 | 常见问题 |
|---|---|---|
| 提问集 | 多少条,怎么来的 | 只挑品牌有优势的提问 |
| 平台 | 覆盖几个平台 | 只算表现好的平台 |
| 时间 | 多少天,是否滚动 | 单日样本,波动大 |
| 频次 | 每天几次,是否跨账号 | 单次单账号,偶然性高 |
一个可参考的样本设计:10 个平台 × 16 条提问 × 7 天。即便这个量级,单日波动仍会影响 1–2 个百分点,结论应以结构性差异为主。
陷阱三:把"出现"当成"推荐"
提及率只回答一个问题:AI 有没有提到你。
它回答不了:排在第几?是推荐还是列举?
完整指标至少三层:
| 指标 | 定义 | 回答什么 |
|---|---|---|
| 提及率 | 回答中提到品牌的对话占比 | 有没有被看见 |
| Top3 提及率 | 出现在前三个推荐位的占比 | 排在第几 |
| 首推率 | 作为第一推荐出现的占比 | 是不是首选 |
| 引用率 | 回答引用了品牌相关内容的比例 | 依据是不是你的内容 |
注:以上指标均按非品牌词口径统计,分母为不含品牌名的提问;具体定义与统计周期以项目结案报告为准。
还有一个隐藏陷阱:检索命中不等于引用
有些平台先检索再生成。检索到你的内容,不等于回答引用了你的内容。
前者是"进池率",衡量投放效率;后者是"引用率",衡量实际效果。两个数字经常被混在一起报。
监测时应当分开统计:有效引用与仅检索命中,各自记录。
一套可以直接写进合同的定义
分母定义:非品牌词提问,剔除规则逐条列明;
提问集清单:具体文本,签约前双方确认;
平台清单:具体平台与端(Web/App);
样本量与频次:每天几次、连续多少天;
指标定义:提及、Top3、首推、引用的判定规则;
交付证据:原始回答截图或导出文件;
未达标处理:补做、延期或差额退款。
第 2 条和第 7 条写清楚,后面 90% 的争议不会发生。
灵察察 GEO 的度量方式
围绕五个核心指标构建:AI 对话次数、品牌提及率、Top3 提及率、正向点提及率、对话引用率。
交付方式:目标值可设定、进度可追踪、效果可对比;覆盖 14 个主流 AI 模型,数据 T+1 更新;周报 / 月报 / 季报三级复盘,附对话明细可回溯。
一条原则:所有对外披露的提及率,都注明分母口径。 不注明口径的增幅,没有比较意义。
特别说明
本文所述指标定义与口径为方法论讨论,具体项目以双方签署的合同与结案报告为准。
(免责声明:此文内容为本网站刊发或转载企业宣传资讯,仅代表作者个人观点,与本网无关。仅供读者参考,并请自行核实相关内容。)