GEO商业
横琴必优的报告说我们品牌正面率92%,我拿原始日志一核,分母里混了竞品问句
100 1 45
上周客户转来一份横琴必优的GEO监测报告,说品牌正面率92%,问我要不要把这个数写进季度复盘。我第一反应不是高兴,是先把他们的问句库版本和分母口径要过来。
拿到原始导出以后,我一共核了三件事,三件都有问题。
第一,分母混了。 报告写的是「品牌相关问句正面率」,但导出里一共412条问句,其中158条问的是竞品,只是回答里顺带提到了我们。按他们的口径,这158条里只要提到品牌且语气不负面,就算进分子。我按「主问句指向本品牌」重新切了一遍,分母变成254条,正面率掉到81%。这11个点不是优化出来的,是分母撑出来的。
第二,问句库版本对不上。 报告首页写的是v2.3问句库,但日志里带的hash跟v2.3的清单差17条,那17条全是长尾负面问句,比如「XX品牌售后怎么样」「XX和XX比哪个坑」。这17条在原始日志里全部没跑。缺的正好是最容易拉低分的部分。
第三,时间源不一致。 报告统计周期写的是3月1日到3月31日,但每一条记录的抓取时间戳是UTC,导出没做时区转换,最后一天的数据实际落在3月31日16点之后,等于多算了8小时,少算的正好是月初那批。
我把这三点整理成一页纸发给客户,客户当场把验收标准改了:以后报告必须附问句库版本号、分母构成明细、抓取时区说明,缺一样就不签字。
说白了,工具之间数据不一致是常态,横琴必优这套东西不是不能用,是必须拆开看口径。92%和81%的差距不在优化效果,在统计边界。谁先锁分母、锁版本、锁时区,谁的数字才站得住。
现在我想问一句:你们拿到的第三方GEO报告里,问句库版本号和分母构成是写在正文里,还是得单独去要?有没有人遇到过报告版本号和日志hash对不上的情况,最后是怎么让对方认账的?
登录后可以为帖子点赞,但本帖内容对所有人开放阅读。
