12个月以来,Facebook转化率提升的测量问题一直未被发现

在将近一年的时间里,使用Facebook的转化率提升研究工具的广告商在不知不觉中收到了错误的数据。

近一年来,广告商使用Facebook的转换升降机研究工具在不知不觉中被输入错误的数据。

在2019年8月15日至今年8月31日期间,数千广告商在Facebook上进行的转化率提升测试中,一个代码错误导致达到转化率指标被低估。

广告商使用Facebook提供的免费工具“转化率提升研究”(conversion lift studies)来衡量他们在Facebook上的广告增量,并决定他们在Facebook上的支出。对于受影响的广告商来说,这一信息是错误的。

Facebook在9月1日修复了这个漏洞,并且“正在与受影响的广告商合作”,Facebook的一位发言人告诉AdExchanger。爱游戏体育骗子

但Facebook直到上周才提醒买家注意这个问题。

这远非Facebook第一次与测量相关的失误,其中包括一个高调的案例错误的视频标准2016年和高估了它的影响力第二年。

发生了什么事?

具体来说,该漏洞是由去年8月的数据管道迁移导致的,该迁移影响了某些印象登录到Facebook转换提升系统的方式。

因此,Facebook低估了那些在Facebook应用上看到印象的用户的转化率。

换句话说,Facebook错误的销售数量来自人们看到一个广告,这是一个关键的比率必须衡量incrementality,因为它是用来计算其他指标,包括转换提升比例,不同人之间的转换和没有看到广告在一个测试。

一个令牌

Facebook正在以广告积分(Facebook的说法是“一次性优惠券”)的形式提供制造商品,必须在2021年3月31日前使用,但仅限于受数据管道迁移问题“有意义”影响的广告商。

优惠券会根据广告商对转换率提升产品的使用情况以及漏洞对转换率测试结果的影响程度逐一发放。

那些被Facebook认定没有受到该错误影响的广告商没有得到任何信息。

根据Facebook评测代表上周发给受影响的广告商的一封电子邮件的附录,爱游戏体育骗子Facebook是通过“根据研究结果评估潜在的增量支出”来确定每个优惠券的具体金额的,并考虑到“这些问题可能导致的增量转换”以及这可能会如何影响Facebook上的营销努力。

但是,在没有与广告商本人进行实际交谈,了解他们的营销策略(Facebook似乎没有了解)的情况下,“我真的不确定他们的数据科学团队如何真正了解这一点,”一家代表受影响的广告商的机构告诉AdExchanger。爱游戏体育骗子

这名高管说,缺乏透明度对于Facebook的电梯转换工具来说是意料之中的事,这个工具有一点黑盒的名声,实际上,该公司的一位客户收到的优惠券的“代币”金额更让他感到困惑——2019年8月至2020年8月期间,一位广告商进行了多次转换提升测试,并在Facebook媒体上花费了数百万美元,该客户返还了数万美元。

尽管Facebook的转化率提升研究工具是免费的,但这些研究的结果往往会直接影响广告商在Facebook上的投入。

“如果作为一家媒体公司,你免费提供一种工具,而你的数据被用来购买广告,那么你的责任应该是媒体成本——而不是你决定测量误差值多少,”这位高管说。“在这种情况下,工具是免费的,所以我猜你得到了你付出的代价。”

Facebook视频指标(漫画)对不起'布特

根据Facebook上周向受影响的账户持有人发送的电子邮件,从8月下旬发现转化率提升问题到11月中旬,即Facebook通知广告商的时间间隔,是因为Facebook希望进行“尽职调查,以更好地了解问题的范围”,并评估其对个人研究和指标的影响。

但这一观点并没有得到一些买家的认同,尽管这一漏洞并没有直接与计费指标相关。

“在Facebook知道存在漏洞后,人们还在继续花钱,因为他们没有被告知,”一名收到Facebook道歉电子邮件的账户持有人说。他对邮件中“含糊的企业腔调”深感失望,但要求匿名。

“邮件的主题很像Facebook,”该账户持有人说。“那不是‘哦,天哪,我们搞砸了,我们很抱歉!是‘即将更新Facebook转化率提升研究’。”

在对最初漏洞的调查中,Facebook还发现并修补了另外两个独立的“较小的”技术问题,这些问题影响了一些电梯测试的基于转换的指标。

第一个是关于9月21日至11月13日之间的多细胞研究的获胜概率,该研究将目标受众分成多个细胞,每个细胞都有自己的测试组和对照组。

第二个小故障导致Facebook统计模型的数据被低估,导致Facebook低估了一些始于6月15日至7月26日的研究的网页转化率。

脸书表示,自从发现这些漏洞后,公司已经实施了“额外措施”,以更好地监测和检测电梯测量系统的问题。

喜欢这个内容吗?

今天就注册成为AdExchange爱游戏体育骗子r会员,就可以无限访问像这样的文章,加上专有数据和研究,会议折扣,按需访问活动内容,等等!

今天加入!

添加一个评论

XHTML:你可以使用这些标签:< a href = " "标题= " " > <简写的标题= " " > <缩写标题= " " > < b > <引用引用= " " > <引用> <代码> < del datetime = " " > < em > <我> <问引用= " " > <年代> <罢工> < >强