AppAdhoc A/B Testing客戶案例

用A/B測試持續提升產品

壞男孩Android首屏版塊優化

公司簡介

壞男孩是中國最大的男性情感社區,專注于為男性同胞提供情感問題解決方案和自我魅力提升服務,幫助他們提升個人魅力和戀愛效率,并通過在線技能教育、IP(知識產權衍生產品)、生活模式消費引導、媒體和秀場直播去服務廣大更年輕的用戶。作為亞洲最先進的追女生社區,產品有超過600萬男孩使用,它幫助男生解決如何追女孩、找到女朋友、挽救破裂的婚姻、愛情,以及如何跟女孩聊天、約會戀愛、搭訕表白等情感問題。

 

案例背景

之前的A/B測試中,壞男孩的產品部門以較小的風險和成本,驗證了許多優化想法,也打造了更優越的用戶體驗。此次,他們希望針對安卓端用戶,進一步強調“干貨”在APP中的核心作用,幫助用戶掌握在不同場景下的追女孩技巧,真正成為一名“把妹達人”。

 

測試方案

AppAdhoc A/B Testing采用科學的試驗流量分割,使得每一組試驗對象具備一致的用戶特征,并在試驗過程中也可以隨時調整用戶流量,使企業可以在新版本上線之前,以最低成本觀察用戶對優化改版方案的數據反饋。同時,根據試驗的數據發現用戶反饋最好的版本,作為最終的新版本迭代方案。

針對現有安卓端產品頁面,產品部門希望通過增加“首屏推薦欄”,進一步優化體驗,促進用戶對不同場景的干貨內容閱讀。于是,他們設計試驗方案如下:

%e7%89%88%e6%9c%ac%e5%af%b9%e6%af%94

原始版本:用戶登錄選擇興趣類型后,訪問一致的頁面內容,首屏頂部有不同版塊入口;

試驗版本:在首屏頂部的版塊入口上方,增加“首屏推薦欄”,用戶登錄后,將根據所選興趣類型推薦不同匹配內容;同時,添加“分手挽回、狙擊真命、聊天、約會”等不同追女孩干貨版塊。

為了驗證所添加欄目對APP整體活躍度的影響,產品部門設定以下試驗指標:人均干貨瀏覽量(驗證是否增加了干貨的總瀏覽量);首頁干貨瀏覽量(驗證對首屏干貨瀏覽的影響);分類頁干貨瀏覽量(驗證分類頁干貨的瀏覽情況);精選頁面PV(驗證用戶是否更愿意看干貨);同時,觀察產品留存數據的變化。

 

測試目標

此次試驗的主要目的是,驗證增加首屏推薦頁和頂部場景化欄目是否對用戶體驗有積極作用,從而進一步提升用戶在產品中的閱讀瀏覽量,優化整體活躍度和用戶體驗。

 

A/B測試數據反饋

此次A/B測試在Android端進行,試驗周期為12天(一般來說,為了獲得更加可信的數據結果,試驗運行周期應至少保證1-2個完整的自然周)。經過對試驗數據的分析解讀,產品部門驗證了此前的想法:

-試驗版本勝出,各項指標數據明顯優于原始版本;

-其中,人均干貨瀏覽量增加5倍,在各類干貨模塊中,人均瀏覽篇數升至9篇,精選模塊PV也提高了7%[+4.4%,+9.5%],產品次日留存也達到43%;

-盡管“首頁干貨瀏覽量”這一指標有下降趨勢(45%),但干貨分類頁面的出現,使新用戶向場景化更加明確的版塊集中(試驗結束后一周干貨新用戶比測試前增加75%);

-基于試驗版本的整體數據表現,壞男孩的產品部門最終決定全量推廣該版本,進一步優化安卓端的用戶體驗。

7244 Views
即刻實踐文章理論 A/B測試 灰度發布 產品優化 免費申請
Please wait...

訂閱我們

對于每位訂閱讀者,每兩周,吆喝科技會為您發送4篇精選文章,可能是最新的A/B測試實踐,也會是你所期待的增長干貨。
ti7奖金 内蒙古11选五复式图表 青海11选五走势图结果 极速快3彩票网站 体彩七位数 股票行情 北京pk赛车10官网 381818自小姐中特+开奖一 浙江11选五怎么中奖 什么炒股app按秒 最好股票推荐