如何从假设检验的角度去理解AB testing

  统计/机器学习 AB Test 假设检验    浏览次数:6871        分享
0

我大致知道AB testing经常运用于网页优化的测试过程中,但是对它的原理和使用中的注意事项理解得不是非常透彻,能不能用通俗的语言进行讲解。

 

sjtufrc   2017-09-14 10:46



   2个回答 
6

说白了A就是对照组(control),B就是实验组(test)。

我们想要比较A组和B组某个指标是否相同,对于网站来说,可以是转化率、点击率、流量等等。

一般是经过一段时间,积累了一定数量的样本,我们就可以有足够的样本进行假设检验了。

从假设检验的角度来说,零假设$H_0: S_A = S_B$,对立假设$H_1:S_A\neq S_B$,或者单侧的对立假设。

这个想法和生统里的case-control study是一个道理,比如A组的病人吃得是安慰糖,B组的病人吃得是降压药,然后对比A,B两组人的血压的均值,也就是可以用T Test来做假设检验。


AB Test包含的内容比单纯的假设检验更广。因为AB Test涉及到很多实验设计的部分。


SofaSofa数据科学社区DS面试题库 DS面经

Nagozi   2018-02-25 07:13

4

Ho: 我觉得用(某特定修改,比如颜色,文意)对于网页的(某种特质,比如点击率)没什么用

H1: 我觉得有用


SofaSofa数据科学社区DS面试题库 DS面经

mosthated   2018-02-25 03:05



  相关讨论

怎么提高一个假设检验的效力(power)?

T检验需要提前假设吗?

假设检验的效力是什么?

单因素方差分析(one-way anova)在使用时需要有什么前提假设条件吗?

假设检验中的p值是什么意思?为什么越小越好?

怎么对两个样本的方差进行假设检验

怎么利用假设检验判断两个骰子是相同的?

双盲实验是什么意思?

线性回归因变量y不满足正态性假设

线性回归需要满足哪些基本前提假设

  随便看看

随机平均梯度法(Stochasitc Average Gradient)和随机梯度下降(SGD)有什么区别

人工神经网络有哪些常用的激活函数?

模型调参时常用到的Grid Search是什么意思?

怎么理解图像识别里的dice系数?

如何在numpy array尾部增加一行