云端知识产权大平台
您的位置:首页>跨境头条>干货指南

跨境运营必看:AB测试操作流程及分析方法全解析

发布日期:2018-12-24 作者:赛贝知识产权平台

做跨境电商运营的朋友们每天都要进行数据统计和分析,但是仅仅只是针对某一群体或某一类产品的数据并不表示很全面,为了能进行整理的数据分析,他们有时候会进行AB测试,以此来获取更精准的产品以及用户数据。很多新手卖家对AB测试不是很了解,今天赛贝小编就来跟大家分享一下这个话题。


AB测试


什么是AB测试?


A/B测试是一种流行的网页优化方法,可以用于增加转化率注册率等网页指标。简单来说,就是为同一个目标制定两个方案(比如两个页面),将产品的用户流量分割成 A/B 两组,一组试验组,一组对照组,两组用户特点类似,并且同时运行。试验运行一段时间后分别统计两组用户的表现,再将数据结果进行对比,就可以科学的帮助决策。


AB测试的操作方法


通常做AB测试是一个逐步设计的过程,在过程中需要注意以下几个要点:目标、方案、设计、数据、分析。具体操作步骤如下:


1、根据业务场景的需求,设立AB测试的目标,也就是需要改进的点。

2、根据目标建立优化方案,通常优化的点是单一要素。

3、依照优化方案进行相关的AB版本设计,这里需要注意的是AB两个版本通常只有优化方案中的单一要素不同,其他界面需保持一致。

4、数据收集,设计好AB测试版本后,将流量合理分发至每个版本,然后收集用户的行为数据。

5、测试结果分析,统计显著性按照95%进行区分,达到标准并且可以维持一段时间则可以结束实验;如果达不到标准则需要延长测试时间;如果长时间达不到标准则需要考虑终止测试。


AB测试结果分析指南


AB测试结果的分析可以分为两个方面的分析,一是统计学分析;一是业务分析。


1、统计学分析


上面简单提到了统计学分析,所谓统计学分析即通过统计学的角度来分析是否可信。这里有三个层面:第一是分析AB两个版本之间的差异性,通过统计显著性来反映;之后再分析差异大小,这里通过改进效果来表示,即转化率的提高或降低的幅度;最后是差异区间,表示转化率改进的空间范围。


统计显著性:

统计显著性也叫显著性,是指两个群体的态度之间的任何差异是由于系统因素而不是偶然因素的影响,同时假定控制了影响差异性的其他影响因素,剩下的是我们推断的因素,但这个也不能够100%保证,因此会有一个概率值即显著性水平。


如前面所提,统计显著性的值代表了如下含义:


1)95%以上:优化版本和原始版本之间有显著的统计差异,转化率的“改进”是可信的;

2)90%~95%:优化版本和原始版本之间的统计差异存有疑问,转化率的“改进”是存有疑问的;

3)90%以下:优化版本和原始版本之间没有显著的统计差异,转化率的“改进”是不可信的;


改进效果:

AB测试中优化版本与原始版本相比转化率提高的幅度。计算公式是:(优化版本转化率-原始版本转化率)/原始版本转化率。


差异区间:

也就是AB测试的优化版本与原始版本之间转化率差异最可能分布的区间范围。例如:A版本为原始版本,B版本是优化版本,A的转化率为10%,B的转化率为15%,则转化率的绝对差异为5%,而转化率的相对差异为50%。


2、业务分析


通过以上统计学分析确定了可信度之后,就需要对AB测试的结果进行业务分析。因为统计学分析中我们已经得出了差异性要素,在通过行业知识、客户心理、用户行为习惯、喜好等角度进一步分析,从统计的数字中挖掘出差异的真正的原因。


当然,并非所有的事情都可以使用AB测试,有时多个设计稿可能会有非常大的差异,这样的情况一般不太适合做 A/B 测试,因为它们的变量太多了,变量之间会有较多的干扰,很难通过 A/B 测试的方法来找出各个变量对结果的影响程度。


深圳市鼎言知识产权代理有限公司 版权所有
联系电话:18823759043   网站导航
Copyright © 2016 粤ICP备20057469号