专栏名称: 爱数据LoveData
中国统计网(www.itongji.cn),国内最大的数据分析门户网站。提供数据分析行业资讯,统计百科知识、数据分析、商业智能(BI)、数据挖掘技术,Excel、SPSS、SAS、R等数据分析软件等在线学习平台。
目录
相关文章推荐
51好读  ›  专栏  ›  爱数据LoveData

AB test | 数据分析师面试必知!

爱数据LoveData  · 公众号  · BI  · 2019-08-21 18:30

正文

请到「今天看啥」查看全文



当用户访问页面时,如上图灰色按钮(控件)和箭头所指红色按钮(变体),利用埋点可以对用户点击行为数据采集,并通过统计引擎进行分析(进行A/B  test)。 然后,就可以确定这种更改(变体)对于给定的指标(这里是用户点击率CTR)产生正向影响,负向影响或无影响。


实验数据结果可能如下:




3
进行A/B test的目的是什么


A / B test可以让个人,团队和公司通过用户行为结果数据不断对其用户体验进行仔细更改。 这允许他们构建假设,并更好地了解为什么修改的某些元素会影响用户行为。 这些假设可能被证明是错误的,也就是说他们对特定目标的最佳体验的个人或团队想法利用A / B test证明对用户来说是行不通的,当然也可能证明是正确的。


所以说 A/B test不仅仅是解决一次分歧的对比,A/B  test可以持续使用,以不断改善用户的体验,改善某一目标,如随着时间推移的转换率。


例如,B2B技术公司可能希望从活动登陆页面提高其销售线索质量和数量。 为了实现这一目标,团队将尝试对标题,可视图像,表单字段,号召性用语和页面的整体布局进行A / B测试更改。


一次测试一个变化有助于他们确定哪些变化对访问者的行为产生何种影响,哪些变化没有影响访问者的行为。 随着时间的推移,他们可以结合实验中多次正向变化的效果来展示变体相对于控件的可测量的改进。



这样来说产品开发人员和设计人员可以使用A / B测试来演示新功能对用户体验变化的影响。 只要目标明确定义并且有明确的假设 ,用户参与,产品体验等都可以通过A / B测试进行优化。

4
A/B test流程


①确定目标: 目标是用于确定变体是否比原始版本更成功的指标。 可以是点击按钮的点击率、链接到产品购买的打开率、电子邮件注册的注册率等等。


②创建变体: 对网站原有版本的元素进行所需的更改。 可能是更改按钮的颜色,交换页面上元素的顺序,隐藏导航元素或完全自定义的内容。


③生成假设: 一旦确定了目标,就可以开始生成A / B测试想法和假设,以便统计分析它们是否会优于当前版本。


④收集数据: 针对指定区域的假设收集相对应的数据用于A/B test分析。


⑤运行试验: 此时,网站或应用的访问者将被随机分配控件或变体。 测量,计算和比较他们与每种体验的相互作用,以确定每个用户体验的表现。


⑥分析结果:







请到「今天看啥」查看全文