隨機測試和AB測試在風控策略上的應用

在風控策略中流傳著不同的測試方法，有隨機測試與AB測試？這兩者有啥區(qū)別？又該如何進行具體的測試案例？本文，來講解這個問題。

一：什么是隨機測試（Ad hoctesting）？

?始于軟件測試：是根據(jù)測試說明書執(zhí)行用例測試的重要補充手段，是保證測試覆蓋完整性的有效方式和過程。隨機測試主要是對被測軟件的一些重要功能進行復測，也包括測試那些當前的測試用例(TestCase)沒有覆蓋到的部分

?風控中的隨機測試主要指對指定或不指定的特定群體（隨機范圍），通過限制或不限制場景（時間、客群、環(huán)節(jié)等），通過隨機數(shù)或其他類似的方式對非特定群體進行觀測。

什么時候進行隨機測試？

?隨時可以進行。策略的觀測及調(diào)整是個動態(tài)且持續(xù)進行的過程，應根據(jù)進件量的多少每天適度一定比例訂單進行隨機測試。

?注意選擇外部環(huán)境或運營策略保持相對平穩(wěn)的時候進行；

?也可按需在需要時或選擇部分客群進行。

二：什么是AB測試？

隨著現(xiàn)代互聯(lián)網(wǎng)的發(fā)展，試驗的門檻不斷降低，A/B測試已經(jīng)被普遍運用在各行各業(yè)，就算你沒有做過A/B測試，也很有可能參與過A/B測試

A/B測試就是將一群用戶分組進行試驗，然后觀察不同組用戶的數(shù)據(jù)表現(xiàn)。

A/B測試就是通過隨機抽樣設置對照組和實驗組，A是對照組，B是實驗組，AB兩組占比由實際場景決定（任意一組的占比一般不能太低，要滿足統(tǒng)計學意義），加起來是100%；

由于是隨機抽樣，AB兩組一開始是完全相同的樣本，然后，改變一個變量，使得B相對A來說只有一個變量不同，從而可以將該變量單獨拎出來、觀察它對輸出結(jié)果的影響。

A/B 測試也是一種產(chǎn)品優(yōu)化方法；為同一個優(yōu)化目標制定兩個方案，讓同一部分用戶中的一部分用戶命中 A 方案，同時另一部分用戶命中 B 方案，統(tǒng)計并比較不同方案的點擊率、轉(zhuǎn)化率等數(shù)據(jù)指標，通過不同方案的數(shù)據(jù)表現(xiàn)，在確定數(shù)據(jù)表現(xiàn)通過假設檢驗后，決定最終方案的實驗方法。

三：隨機測試和AB測試有什么不同？

?AB測試是有兩種策略進行比較的，有較明確對象，而隨機測試，顧名思義隨機，是測試沒有特定的比較對象的。

?也可認為隨機測試為AB測試的一個特例：特定的與非特定進行比較；隨機測試完成后，會根據(jù)測試結(jié)果選擇新的方向?qū)σ延胁呗赃M行優(yōu)化，可能會形成新的AB測試