随机测试和AB测试在风控策略上的应用

在风控策略中流传着不同的测试方法,有随机测试与AB测试?这两者有啥区别?又该如何进行具体的测试案例?本文,来讲解这个问题。

一:什么是随机测试(Ad hoctesting)?

Ø始于软件测试:是根据测试说明书执行用例测试的重要补充手段,是保证测试覆盖完整性的有效方式和过程。随机测试主要是对被测软件的一些重要功能进行复测,也包括测试那些当前的测试用例(TestCase)没有覆盖到的部分

Ø风控中的随机测试主要指对指定或不指定的特定群体(随机范围),通过限制或不限制场景(时间、客群、环节等),通过随机数或其他类似的方式对非特定群体进行观测。

什么时候进行随机测试?

Ø随时可以进行。策略的观测及调整是个动态且持续进行的过程,应根据进件量的多少每天适度一定比例订单进行随机测试。

Ø注意选择外部环境或运营策略保持相对平稳的时候进行;

Ø也可按需在需要时或选择部分客群进行。

二:什么是AB测试

随着现代互联网的发展,试验的门槛不断降低,A/B测试已经被普遍运用在各行各业,就算你没有做过A/B测试,也很有可能参与过A/B测试

A/B测试就是将一群用户分组进行试验,然后观察不同组用户的数据表现。

A/B测试就是通过随机抽样设置对照组和实验组,A是对照组,B是实验组,AB两组占比由实际场景决定(任意一组的占比一般不能太低,要满足统计学意义),加起来是100%;

由于是随机抽样,AB两组一开始是完全相同的样本,然后,改变一个变量,使得B相对A来说只有一个变量不同,从而可以将该变量单独拎出来、观察它对输出结果的影响。

A/B 测试也是一种产品优化方法;为同一个优化目标制定两个方案,让同一部分用户中的一部分用户命中 A 方案,同时另一部分用户命中 B 方案,统计并比较不同方案的点击率、转化率等数据指标,通过不同方案的数据表现,在确定数据表现通过假设检验后,决定最终方案的实验方法。

三:随机测试和AB测试有什么不同?

ØAB测试是有两种策略进行比较的,有较明确对象,而随机测试,顾名思义随机,是测试没有特定的比较对象的。

Ø也可认为随机测试为AB测试的一个特例:特定的与非特定进行比较;随机测试完成后,会根据测试结果选择新的方向对已有策略进行优化,可能会形成新的AB测试

本文经授权发布,不代表增长黑客立场,如若转载,请注明出处:https://www.growthhk.cn/quan/47306.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2021-09-17 11:43
下一篇 2021-09-17 13:25

增长黑客Growthhk.cn荐读更多>>

发表回复

登录后才能评论
特别提示:登陆使用搜索/分类/最新内容推送等功能 >>