在风控策略中流传着不同的测试方法,有随机测试与AB测试?这两者有啥区别?又该如何进行具体的测试案例?本文,来讲解这个问题。
一:什么是随机测试(Ad hoctesting)?
Ø始于软件测试:是根据测试说明书执行用例测试的重要补充手段,是保证测试覆盖完整性的有效方式和过程。随机测试主要是对被测软件的一些重要功能进行复测,也包括测试那些当前的测试用例(TestCase)没有覆盖到的部分
Ø风控中的随机测试主要指对指定或不指定的特定群体(随机范围),通过限制或不限制场景(时间、客群、环节等),通过随机数或其他类似的方式对非特定群体进行观测。
什么时候进行随机测试?
Ø随时可以进行。策略的观测及调整是个动态且持续进行的过程,应根据进件量的多少每天适度一定比例订单进行随机测试。
Ø注意选择外部环境或运营策略保持相对平稳的时候进行;
Ø也可按需在需要时或选择部分客群进行。
二:什么是AB测试?
随着现代互联网的发展,试验的门槛不断降低,A/B测试已经被普遍运用在各行各业,就算你没有做过A/B测试,也很有可能参与过A/B测试
A/B测试就是将一群用户分组进行试验,然后观察不同组用户的数据表现。
A/B测试就是通过随机抽样设置对照组和实验组,A是对照组,B是实验组,AB两组占比由实际场景决定(任意一组的占比一般不能太低,要满足统计学意义),加起来是100%;
由于是随机抽样,AB两组一开始是完全相同的样本,然后,改变一个变量,使得B相对A来说只有一个变量不同,从而可以将该变量单独拎出来、观察它对输出结果的影响。
A/B 测试也是一种产品优化方法;为同一个优化目标制定两个方案,让同一部分用户中的一部分用户命中 A 方案,同时另一部分用户命中 B 方案,统计并比较不同方案的点击率、转化率等数据指标,通过不同方案的数据表现,在确定数据表现通过假设检验后,决定最终方案的实验方法。
三:随机测试和AB测试有什么不同?
ØAB测试是有两种策略进行比较的,有较明确对象,而随机测试,顾名思义随机,是测试没有特定的比较对象的。
Ø也可认为随机测试为AB测试的一个特例:特定的与非特定进行比较;随机测试完成后,会根据测试结果选择新的方向对已有策略进行优化,可能会形成新的AB测试
本文经授权发布,不代表增长黑客立场,如若转载,请注明出处:https://www.growthhk.cn/quan/47306.html