A/B測試是什么？

A/B測試是為Web或App界面或流程制作兩個（A/B）或多個（A/B/n）版本，在同一時間維度，分別讓組成成分相同（相似）的訪客群組（目標人群）隨機的訪問這些版本，收集各群組的用戶體驗數(shù)據(jù)和業(yè)務(wù)數(shù)據(jù)，最后分析、評估出最好版本，正式采用。

| 問題解答

星環(huán)科技

0

2條點評

咨詢產(chǎn)品

免費試用

解決用戶選型困難的好軟件，有各維度的信息

客戶案例

5

合作品牌

19

A/B測試就是為同一個目標制定兩個版本，這兩個版本只有某個方面不一樣，其他方面保持一致，例如兩個版本只有按鈕的顏色不一樣。

讓一部分用戶使用A版本（實驗組），另一部分用戶使用 B版本（對照組）。試運行一段時間后，分別統(tǒng)計兩組用戶的表現(xiàn)， 然后對兩組數(shù)據(jù)進行對比分析，最后選擇效果更好的版本正式發(fā)布給全部用戶。

| 拓展閱讀

A/B測試的實施步驟

1. 現(xiàn)狀分析：分析業(yè)務(wù)數(shù)據(jù)，確定當(dāng)前最關(guān)鍵的改進點。

2. 假設(shè)建立：根據(jù)現(xiàn)狀分析作出優(yōu)化改進的假設(shè)，提出優(yōu)化建議。

3. 設(shè)定目標：設(shè)置主要目標，用來衡量各優(yōu)化版本的優(yōu)劣；設(shè)置輔助目標，用來評估優(yōu)化版本對其他方面的影響。

4. 界面設(shè)計：制作2（或多）個優(yōu)化版本的設(shè)計原型。

5. 技術(shù)實現(xiàn)：

（1）網(wǎng)站、App(Android/iOS) 、微信小程序和服務(wù)器端需要添加各類A/B測試平臺提供的SDK代碼，然后制作各個優(yōu)化版本。

（2）Web平臺、Android和iOS APP需要添加各類A/B測試平臺提供的SDK代碼，然后通過編輯器制作各個優(yōu)化版本。

（3）通過編輯器設(shè)置目標，如果編輯器不能實現(xiàn)，則需要手工編寫代碼。使用各類A/B測試平臺分配流量。初始階段，優(yōu)化方案的流量設(shè)置可以較小，根據(jù)情況逐漸增加流量。

6. 采集數(shù)據(jù)：通過各大平臺自身的數(shù)據(jù)收集系統(tǒng)自動采集數(shù)據(jù)。

7. 分析A/B測試結(jié)果：統(tǒng)計顯著性達到95%或以上并且維持一段時間，實驗可以結(jié)束；如果在95%以下，則可能需要延長測試時間；如果很長時間統(tǒng)計顯著性不能達到95%甚至90%，則需要決定是否中止試驗。