通俗点理解,AB测试就是比较两个东西好坏的一套 *** ,这种A和B的比较在我们的生活和人生中非常常见,所以不难理解。具体到AB测试这个概念,它和我们比较哪个梨更大、比较哪个美女更漂亮、比较哪个工作更好之间有什么区别吗? 区别其实非常明显,从以下几个方面不难看出来:
领域不同:AB测试的概念是在互联网中被提出来的,所以它有特定的应用领域。
标准不同:AB测试需要比较产品的两个不同版本之间的优劣,但是评判要交给用户,不像我们生活中遇到的AB比较,基本都可以“自己拿主意”。
正是因为标准在“用户爸爸”那里,所以这个看起来很简单的AB比较就变得异常复杂。在我这个理科男眼里,凡是跟人有关的东西都更复杂,何况和千千万万人有关的产品。因此,为了比较A和B两个不同版本产品的优劣,AB测试这一套系统的 *** 被发明出来了。
上图是AB测试的一个直观解释。我们会随机给不同的人群提供两个不同版本的产品,然后通过收集用户反馈的数据进行统计分析,决定出哪个版本的产品更好。相信我们每个人都当过AB测试的小白鼠,细心的你不难在使用微信、抖音、高德、美团这些APP时发现一些端倪。
*** 上给AB测试下了一个定义:
A/B testing is a way to compare two versions of a single variable, typically by testing a subject's response to variant A against variant B, and determining which of the two variants is more effective.
在我看来这跟啥也没说差不多,就是我上面“通俗理解”的翻译版本。AB测试属于那种一听就懂,一看就明白,一做就抓瞎的事。所以定义和概念不重要,实践才重要。幸运的是,前辈们已经帮我们总结了非常多的经验教训,而我作为知识的搬砖工,将会用几篇文章来和大家一起从零开始学习AB测试。
互联网公民之一守则:不要重复造轮子。
互联网公民第二守则:参照上一条。
AB测试虽然思想简单但是非常有效,看了如下的几个好处你就明白为什么一定要做AB测试了:
如果我们人工针对部分用户做调研,很难消除一些外部因素的影响,比如交通、天气、节日,而AB测试可以通过随机分配和对照的方式,有效消除这些影响。
如果我们听取专家或研究机构的建议,众所周知,他们很可能出错。用户行为是个很复杂的事,具有潜在性,很多时候用户自己都不知道自己怎么想的,想要什么。
让数据说话,而不是听老板的
总之,AB测试可以帮助我们消除主观因素的影响,尽量做出更理性,更符合实际的决策。
在此引用一本书里的图片,AB测试的基本步骤如下:
翻译过来大致如下:
创建假设:明确要测试的目标。
分析并具体化假设:目标一定要具体化,比如将用户点击率提升1个百分点。
定义评估指标:如何对你关心的指标量化?
决定要做实验的平台:网页端?移动端?安卓还是IOS?
技术实现:交给码农
结果分析
消除干扰:不要以为有了结果就可以下结论了,后面会教大家躲坑大法
结论
可以看出在实际执行过程中有很多细节和步骤需要考虑,并不是直接把两个版本的产品随机分配给不同用户那么简单。既然AB测试是让数据说话,所以目标/指标量化就很关键,说直白点,拿什么来证明A比B好呢?好比挑个西瓜,你也得有几个评估的标准:大小,色泽,声响等等。
另外,在真正开始做实验之前,还有个重要的问题需要解决,那就是你的测试样本要选多大。你要清楚,我们不可能对大多数用户都进行测试,那样跟“先上线有了问题再回退版本”的简单粗暴方式就没有了区别。所以在实验之前需要评估出你所需要的最小样本数目(最少被测试用户的数目)。AB测试本质上是做统计假设检验,所以已经有很多现成的统计工具帮我们来做类似的事情,下面有个简单的网页端工具,感兴趣的朋友可以去试试看。
一个AB测试的辅助工具:
下一篇《从零开始学AB测试:躲坑篇》将和大家分享在AB测试中如何躲避前人踩过的各种坑。记得加关注。
[1] 《A Definitive Guide to A/B Testing: Practical Lessons for Online Product Managers 》, Divakar Gupta
如果你喜欢以上内容,欢迎到我的个人主页关注我:Homepage
黑客并不是一个贬义词,而是指计算机程序水平非常高的一类人群,要有非常高的计算机编程技能,对于一个零基础的人来说,这些都不是容易的事情,但是并不代表不能做。
学编程是黑客的基本功,如果之前没有接触过任何编程的话,应该从比较常用的Python、Java、C语言,Unix等计算机语言开始学起;同时,黑客必须要了解硬件和软件的联系和相关的知识,并且知道多个操作系统各自的特点和漏洞;还要学习 *** 知识、了解 *** 构成,因为黑客的主要控制力都是靠 *** 进行的;掌握了相关的知识之后,要学习黑客的基础知识和技能,比如说密码技术、入侵技巧等。
没有人可以教谁 因为要教人肯定要收费(要不然谁会那么有空肯自愿教一个小白),要收费你又怕被骗,所以还是靠自己吧。
黑客技术一般是不会有人教你的,如果你想学的你可 百度下黑基网,黑基网自2011年3月26日成立以年已经成为中国乃至全球的华语黑客与安全资讯门户,为社会培训了上万名 *** 安全技术人才. 普及 *** 安全技术,捍卫祖国信息长城是黑客基地不渝的追求,黑基今年将不断推出系列庆典活动来展示黑基的风采和自信为走出国门走向国际打下坚实的基础。黑客基地-全球更大的中文黑客站。黑客基地是由国内外大型IT公司和安全公司的 *** 精英和安全专家共同联合发起设立,专业从事黑客技术与安全防范研究的赢利性组织,以普及 *** 黑客安全技术,推动我国信息安全建设为己任。据称,黑客基地已经拿到千万级风投,有望在三五年内上市。
是入门2113。你自己总要带个目标。5261例先学习哪方面的4102。然后在学什么。1653 基础教程是看看吧。我给你推荐个论坛上面很多编程,汇编,之类的教程,专业的讲师教学,说的详细而且很容易就能理解你百度搜索 黑吧论坛 之一个就是了。
今天的蚂蚁庄园问题已经更新了,这次问题有一点难度,4月20日庄园小课堂每日一题的题目是:在电脑屏幕旁放一颗仙人掌,能防电脑辐射吗?小编我特意整理了相关的资讯,那么正确答案是“不能”还是“完全可以”呢?...
黄牛党软件作者、代理、客户在这类恰当的三角关系中纠缠不清,这身后投射着的是今日全部互联网技术黑灰产的普相。今日我觉得讲好多个角色的小故事,通过小人物,窥一眼这武林。 二十岁的开发人员:老久 老久的手机...
近些年,直播间融进了日常生活的各个方面,领域绿色生态日益丰富多彩。“宅经济”推动网络直播平台,2020在线视频直播领域客户将达5.26亿人,伴随着挪动机器设备的普及化、挪动互连网客户的扩张,在线视...
许多年青人工作中两年以后,存了一笔钱,就逐渐惦记着自己做生意做老总。但是做为自主创业新手却又烦扰不清楚究竟要干什么领域。绝大多数人都从在网上检索“十万块钱投资什么盈利大?”“做什么赚钱快,最轻轻松松呢...
近日,Spring官方团队在最新的安全更新中披露了一则SpringCloud Config目录遍历漏洞(CVE-2019-3799)。 漏洞官方定级为High,属于高危漏洞。 该漏洞本质是允许应用程序...
谁可以想起,以前被年青人捧为“潮流品牌”的美特斯邦威会迈向衰落,不但知名品牌走下坡,乃至老总还被限制消费了。这类起起伏伏的小故事一般都产生在电视剧中,可是在现实生活中却确实发生了,做为上市企业的首席总...