AppAdhoc A/B Testing客戶案例

用A/B測試持續提升產品

微軟商城結算頁展示優化

公司簡介

微軟(Microsoft)公司由比爾·蓋茨與保羅·艾倫創始于1975年,總部設在華盛頓州的雷德蒙市。是全球最大的電腦軟件提供商。微軟公司現有雇員6.4萬人,2005年營業額368億美元。其主要產品為Windows操作系統、Internet Explorer網頁瀏覽器及Microsoft Office辦公軟件套件。微軟商城是微軟中國的官方商城,銷售Windows Phone等數碼產品以及微軟旗下軟件產品。商城內全部貨品有官方正品保證,用戶購買后享受30天無理由退貨,2年有限保修,7*24在線服務等權益。

?

案例背景

作為電商類網站,微軟商城非常重視用戶在最終付款環節的成功率。為了進一步提升用戶在結算頁面的漏斗轉化率,產品部門希望通過A/B測試的方式,優化結算頁面的布局,找到更有助于推動用戶提交訂單的設計方案。他們推測,可能是由于產品結算頁的操作較為復雜,導致目前轉化率不高,如果能夠簡化步驟就能增加訂單生成量。為此,他們設計了一套簡化方案,來驗證自己的假設。

 

測試方案

AppAdhoc A/B Testing采用科學的試驗流量分割,使得每一組試驗對象具備一致的用戶特征,并在試驗過程中也可以隨時調整用戶流量,使企業可以在新版本上線之前,以最低成本觀察客戶對多個優化方案的數據反饋。同時,根據試驗的數據發現用戶反饋效果最好的版本,作為最終的新版本迭代方案。

產品部門將策劃的兩套頁面展示方案如下:

%e5%8e%9f%e5%a7%8b%e7%89%88%e6%9c%ac%e8%af%95%e9%aa%8c%e7%89%88%e6%9c%ac

原始版本:結算頁面分為3個步驟(收貨地址、支付方式和發票信息確認),用戶在打開后頁面自動展開“收貨地址”欄,信息無誤確認才能繼續下一步驟;

試驗版本:將收貨地址和發票項合并為“發票與地址”,在用戶打開時自動展開,待信息無誤確認后,再選擇支付方式。

同時設置“提交訂單”按鈕的點擊量和轉化率為本次試驗的主要優化指標。

 

測試目標

此次試驗的目的是對比結算展開項簡化前后,用戶成功提交訂單的數據效果,以驗證微軟產品部門的試驗假設,進一步優化結算轉化率。

 

A/B測試數據反饋

本次試驗在PC端網頁進行,在試驗運行了半個月后(一般來說,為了獲得更加可信的數據結果,試驗運行周期應至少保證1-2個完整的自然周),產品部門得到了客觀科學的數據結論。

-試驗版本勝出,簡化成兩個步驟之后,用戶提交訂單的轉化率相比3項的版本提升6%,且在95%的置信區間下,新版本的效果呈統計學顯著,優于原始的復雜版本;

-試驗結果表明,簡化后的結算頁面有效減少了用戶的操作步驟,提高了用戶進入付款頁面的轉化率。因此,產品部門決定通過一鍵發布功能,將新版本在線展示給全量用戶。

8946 Views
即刻實踐文章理論 A/B測試 灰度發布 產品優化 免費申請
Please wait...

訂閱我們

對于每位訂閱讀者,每兩周,吆喝科技會為您發送4篇精選文章,可能是最新的A/B測試實踐,也會是你所期待的增長干貨。
ti7奖金