AppAdhoc A/B Testing客戶案例

用A/B測試持續提升產品

墨跡天氣Tab電商入口優化

公司簡介

墨跡天氣提供最專業、最穩定的天氣查詢服務,讓人們能夠知曉天氣變化,提前做好出行計劃,更智能的生活。墨跡天氣陸續在Android、iOS、Windows Phone手機平臺推出了國際版,支持196個國家70多萬個城市及地區的天氣查詢,分鐘級、公里級天氣預報,幫助用戶更好做出生活決策。2013年,首創時景天氣——實時天氣照片的眾包平臺。通過智能識別,根據照片信息自動進行天氣信息校正,實現了UGC輔助PGC,PGC指導UGC的良性循環。2014年,墨跡天氣將軟件延伸到硬件,首次發布空氣檢測智能硬件——空氣果,智能硬件讓空氣連接,不僅提供戶外的天氣信息還關心用戶室內空氣質量,室內和室外的結合,將人們的生活場景描述的更加完整化。墨跡天氣通過軟硬結合的方式,將業務由宏觀天氣擴展到微觀的個人家居環境,打造環形移動互聯網生活體驗。2016年,墨跡注冊用戶 過5億,提出并踐行“天氣+”,以氣象大數據為基礎,將天氣作為入口,提供給用戶更多生活化、場景化的服務。

 

案例背景

目前墨跡天氣處于轉型、流量變現階段,作為一款工具類產品,這個階段每一步嘗試都至關重要,產品和業務部門要確保在實現突破、創新的同時,保證現有用戶活躍和留存的穩定。

為了讓用戶可以持續停留在平臺上,墨跡團隊考慮在產品中接入電商入口,在主頁Tab中,將多出一個精選按鈕引導用戶進入電商平臺。由于是一個全新的業務功能,考慮到這個功能的穩定性、對現有功能的使用熱度的影響以及給墨跡整體用戶帶來的變化,他們希望通過A/B測試先看下效果,再決定是否正式上線。

 

測試方案

AppAdhoc A/B Testing采用科學的試驗流量分割,使得每一組試驗對象具備一致的用戶特征,并在試驗過程中也可以隨時調整用戶流量,使企業可以在新版本上線之前,以最低成本觀察客戶對多個優化方案的數據反饋。同時,根據試驗的數據發現客戶反饋最好的版本,作為最終的新版本迭代方案。

基于現有產品主頁Tab樣式,產品部門設計了包括1個原始版本在內的3個設計方案,具體內容如下:

%e7%94%b5%e5%95%86%e5%85%a5%e5%8f%a3%e7%89%88%e6%9c%ac%e5%af%b9%e6%af%94

%e7%94%b5%e5%95%86%e9%a1%b5%e9%9d%a2%e7%89%88%e6%9c%ac%e5%af%b9%e6%af%94

原始版本:主頁Tab共有3個功能入口,分別為“天氣、時景、我”;

試驗版本A:將主頁Tab增加一個“商城”入口,用戶點擊進入功能頁后,訪問有banner位的商城頁面;

試驗版本B:將主頁Tab增加一個“商城”入口,用戶點擊進入功能頁后,訪問有8個主題版塊的商城頁面。

同時,將Tab按鈕的點擊情況設置為本次試驗的核心關注指標。

 

測試目標

本次試驗主要在于驗證“商城”功能的穩定性,以及該功能上線后,用戶的使用情況,并且觀察是否會對原有功能的使用熱度造成影響。

 

A/B測試數據反饋

此次的 A/B 測試主要應用場景在安卓端,試驗周期為兩周(一般來說,為了獲得更加可信的數據結果,試驗運行周期應至少保證1-2個完整的自然周)。經過產品部門和吆喝科技客戶成功部門的共同分析,試驗結論主要如下:

-數據顯示兩個試驗版的電商接口引流效果都不錯,用戶對兩個版本電商接口的熱度都很高;

-相對原始版本,兩個試驗版本在現有功能Tab的點擊上,都出現了不同程度的下降,其中對“時景”功能的影響最為明顯,降幅在20%以上;

-新功能的上線,必然會更多的吸引用戶的眼球和精力,墨跡天氣的產品和商務團隊,將基于公司發展方向、電商業務實際轉化以及對用戶使用影響的幾個方向去綜合考量,從而決定是否會正式上線“商城”模塊;

-不論最終決定如何,本次試驗都提供了為墨跡提供了很重要的數據決策依據。

11902 Views
即刻實踐文章理論 A/B測試 灰度發布 產品優化 免費申請
Please wait...

訂閱我們

對于每位訂閱讀者,每兩周,吆喝科技會為您發送4篇精選文章,可能是最新的A/B測試實踐,也會是你所期待的增長干貨。
新加坡2分彩平台注册