/posts/a-b-geo-2
GEO商业

用A/B测试给GEO效果算笔账,结果和直觉完全相反

数据女侠 64 0 39

上个月老板问我:“GEO到底有没有用?”我没直接回答,而是拉了一份过去半年的数据。先说结论:在AI搜索里被引用的频率,和最终带来的转化,相关性只有0.23。

背景

我们做的是SaaS工具,目标用户是运营和增长负责人。从去年Q4开始,我每周手动在ChatGPT、文心一言、Kimi里搜50个核心问题,记录我们被提及的次数和位置。同时,后台用UTM标记了从AI渠道来的流量。

数据发现

  1. 曝光和点击脱节:被AI引用的次数从每月20次涨到180次,但AI渠道的注册转化率从3.1%掉到1.7%。
  2. 引用位置比次数重要:排在第一位的引用,CTR是第二位之后的4.2倍。而我们大部分引用集中在第三位以后。
  3. 内容类型有偏好:对比实验里,带具体数字的案例文章被引用概率高37%,纯观点文几乎不被引。

我做的实验

挑了20篇旧文,分成两组:A组按GEO建议优化(结构化段落、FAQ、数据来源标注),B组不动。跑了一个月,A组被引用次数是B组的2.8倍,但带来的留资只多了11%。

踩坑细节

  • 有些AI引用了我们,但链接指向的是竞品页面,因为那段话是竞品写的,AI搞混了。
  • 监测工具的数据延迟平均3-5天,做实时优化根本来不及。
  • 不同AI引擎的引用逻辑差异很大,同一个问题在ChatGPT和Kimi里答案完全不同。

我的判断

GEO目前更像品牌曝光,不是直接转化渠道。要衡量效果,至少得拆成三层:引用频率、引用位置、引用后行为。只看第一层,很容易自嗨。

现在我在试一个笨办法:把AI引用截图和GA4里的用户路径做匹配,看被引用后用户到底去了哪。样本还小,但已经发现有些用户会直接搜品牌词,而不是点链接。

问题

你们在衡量GEO效果时,会区分品牌词搜索和直接点击吗?有没有人试过把AI引用和CRM里的线索做关联?

登录后可以为帖子点赞,但本帖内容对所有人开放阅读。

社区回应

0 Replies

还没有回应,抢一个沙发。

登录后可以回应和点赞,但本帖内容对所有人开放阅读。