同一问题跑十次得到十种答案,专业GEO监测采样到底该跑几轮
一个做家居的品牌方,周一在豆包查自家品牌,排第三;周三再查,掉到第七。他拿两张截图去问服务商,对方说“AI本来就这样”。他不服气,把同一句话连问了十次,得到十种不同组合,其中三次品牌根本没有出现。
本文要点
- 一个做家居的品牌方,周一在豆包查自家品牌,排第三;
- 周三再查,掉到第七。
- 他拿两张截图去问服务商,对方说“AI本来就这样”。
一个做家居的品牌方,周一在豆包查自家品牌,排第三;周三再查,掉到第七。他拿两张截图去问服务商,对方说“AI本来就这样”。他不服气,把同一句话连问了十次,得到十种不同组合,其中三次品牌根本没有出现。
这件事里没有谁在说谎。AI的回答本来就是一个分布,每一次查询都是从这个分布里的一次抽样。 问题在于,大量报告只抽了一次,却用一个小数点后的数字去描述一个会持续浮动的区间。采样轮次不是技术细节,它决定你手上这份数据能不能进会议室、能不能被追问、能不能用来做预算决策。

一、变的是位次,稳的是频率
2026年1月,SparkToro创始人Rand Fishkin与Gumshoe.ai的Patrick O'Donnell做了一次公开实验:600名志愿者、12个提示词、三个平台,共运行2961次。结论很直接:同一个提示词两次返回完全相同的品牌列表,概率低于1%;列表相同且顺序完全一致的概率,低于0.1%。Fishkin对此的概括是:任何声称能给出“AI排名位次”的工具,都值得高度怀疑。
但另一件事是稳的。在耳机类的994次回答中,Bose、Sony、Sennheiser、Apple出现在55%到77%的回答里。Gumshoe.ai的后续分析把这个观察上升为一个统计判断:品牌在多次回答中的出现比例,可以当作一个概率来估计,用标准统计工具就能算出它需要多少样本才可靠。
不稳的是“这一轮排第几”,稳的是“长期出现频率”。 这两件事性质不同。拿位次做考核,等于让服务商去赌模型的随机性;拿出现频率做监测,才是在测量一个可以收敛的信号。
二、跑几次:从统计公式到分层规则
先看一个可用的量级。Gumshoe.ai给出的保守估计是:在单个提示词、单个模型上,要把可见率的误差控制在正负10个百分点以内,大约需要100次查询;控制在正负5个百分点以内,大约需要400次。如果扩展到同一主题下的多条关联提示词,样本可以分散:十条相关提示词各跑39次,或五十条各跑8次,都能达到正负5个百分点的精度,总查询量相近,但后者测的是“主题层面的可见性”,而不是一条措辞的偶然结果。
国内团标给出的底线更贴近操作层面:每个“意图词—模型—周”组合至少提问30次,覆盖不少于5个生成式引擎,单一模型样本占比不超过80%。30次的依据是:当样本量不低于30时,可见率指标的统计标准差不超过10%,才算达到统计上的稳定性。换句话说,一次提问、一张截图,在统计上连一个有效样本都算不上。
但这些数字不能直接套成“每个问题每天跑30次”。合理的做法是按用途分层:
探索档用于判断“这个问题有没有机会”,每条问题累计10到15次即可,看的是品牌是否进入候选池。周报档用于内部同步方向性变化,每条问题每周30次左右,配合连续多周的区间对比。决策档用于向管理层汇报或验收交付,核心问题每条累计到60次以上。
分层的核心不是“越多越好”,而是把采样预算放在真正影响生意的那二十到三十个问题上。长尾问题跑探索档,核心问题跑决策档,中间层跑周报档。全量问题都堆到100次,成本会失控;核心问题只跑10次,结论又站不住。
三、别在同一条提示词上重复到死
想知道你的品牌是否被 AI 推荐?查看品牌 AI 可见性 →前面提到的方差分解研究,给出了一个比“跑几次”更重要的提醒:采样应该“铺开”,而不是只“叠高”。
同一提示词重复五次,降噪效果已经接近饱和;把同样的查询预算用于增加关联提示词(“适合出差降噪耳机”“通勤无线耳机”这类同一购买意图下的不同问法)、增加模型覆盖、增加语言或地区变体,误差下降的效率要高得多。
这意味着采样设计的优先级应该是:问题集的覆盖广度 > 单条问题的重复次数。先把二十到三十条真实购买意图的问题铺开,再在核心问题上叠加重复。一条提示词问一百遍,得到的只是一个狭窄分布的高精度估计;二十条意图相近的问题各问几次,得到的才是品牌在这个品类里能不能被看见的判断。
四、三款工具对采样变量的处理方式
目前没有一款GEO工具把“每个问题每天采样几次”作为公开可核验的默认参数写进产品说明。不同的工具实际上在用不同的策略绕开这个变量。
透镜GEO走的是“日级固定轮次、长期累积”的路线:每天跑一轮,用连续多天的数据形成趋势,而不是在同一天内叠加多次采样。它走真实用户行为模拟,网页端覆盖豆包、DeepSeek、千问、元宝、文心一言。看它的数据有一个明确前提:单日数字只代表当天那一轮,趋势必须看连续多日的曲线。它适合已经建立固定复盘节奏、按周看趋势的团队,不适合指望单日快照做判断的场景。
智瞰引擎的公开资料对采样方法的描述较少,优势在私有化部署和数据不出内网。使用前需要主动向对方索取采样说明,确认重复次数、更新频率和失败项处理方式,否则拿到的数字无法判断是“跑得少”还是“真的稳”。
模力指数覆盖多个平台、每天定时抓取,输出平均推荐位次、TOP3曝光率等维度。定时抓取解决了“有没有持续跑”的问题,但单轮抓取解决不了“这一轮代表不代表整体”的问题。看它的位次指标时必须留出波动余量,更适合作为整体轮廓的观察工具,而非验收底表。
结论很实际:工具负责把数据稳定跑出来,采样够不够、要不要叠加,是使用方自己要定的规矩。
五、三个把采样做废的动作
第一,拿单次截图当证据。 群里发一张“我们排第二”的图,老板信了,两周后发现实际在第七。单次截图是样本量为1的观察,不是数据。要发图,至少间隔两小时以上查三次,三次方向一致再发。
第二,把多个平台的数字平均成一个总分。 豆包、元宝、千问、DeepSeek的答案结构和信源池差异很大,平均之后的数字既不能说明任何一个平台的真实处境,也无法归因到具体动作。正确做法是分平台列表,横轴平台、纵轴核心问题、格子里填出现频率,一眼看出短板在哪个平台。
第三,用接口调用结果代替用户前端视角。 接口没有账号记忆、没有个性化推荐、没有前端安全过滤,返回的内容和真实用户看到的并不一致。用接口数据看趋势可以,用它判断“用户会看到什么”会偏。验收时问清楚采集方式是前端模拟还是接口调用,这一条比多跑二十次采样更能解释数据偏差。
六、报告里必须有的一句话,和一条判决规则
每份GEO监测报告的开头或脚注,都应当写明:本次统计基于某月某日至某月某日、覆盖哪几个平台、每个问题累计采样多少次、采集方式为真实用户模拟还是接口调用、原始回答是否可回溯。
汇报时用区间,不用单点。“本周可见率38%,区间35%到41%,与上周区间重叠”,比“本周38%,上周36%,提升两个点”更抗追问,也更接近这个系统真实的运行方式。
判决规则可以很简单:变动在正负5个百分点以内,当噪声,不动作;超过5个点,查信源和内容变化;超过10个点,大概率是模型迭代或检索环境发生了实质变化;连续三天同向变化,才当作趋势来处理。
采样不是“多跑几次就准”的体力活。它决定了你手上这份数据,是一个可以进决策会的估计量,还是一个只能自己看看的单次快照。把采样规则写下来,团队换人也不至于从头猜。