文章對AB測試的方法做了一些分享和解讀，來，發(fā)車！

如果有高人指點，只要你更改 App Store 商品詳情頁的一個圖形元素，就能讓應用轉(zhuǎn)化率提高 66％，猜你二話不說就會去做！

可惜，這樣的高人并不存在，但是這個例子只是為了說明：?A / B測試對于應用在市場的表現(xiàn)情況至關(guān)重要！轉(zhuǎn)化率每增加 1％，你的收益將增加 1％。這就是現(xiàn)實！

此時你們的的疑問應該是:“常年都在說 A / B 測試這個老梗，有沒有具體的測試流程呢？”

今天的文章中，我們會向你詳細介紹 A / B 測試的方法，看完之后你就沒有任何借口不做 A / B 測試了喲！準備好了嗎？開車！

Google Play 自帶 A / B 測試功能，如果你的產(chǎn)品在這個平臺發(fā)布，那做 A / B 測試就很方便。但如果你的應用發(fā)布于 iOS 平臺，就要麻煩一些。

哪些內(nèi)容需要測試？

這個問題的答案視不同情況而定，總結(jié)來說：觀察 App Store 的商品詳情頁，最容易被忽略的內(nèi)容則是最最需要測試的內(nèi)容。假如你的 icon 設計得精致又特別，相比下來截圖顯得暗淡無趣，那你就可以先從截圖入手，換一些效果同樣醒目的截圖，看看哪個效果更好。

根據(jù) StoreMaven 的數(shù)據(jù)顯示：視頻、截圖和圖標是最影響轉(zhuǎn)化率的幾個因素。StoreMaven 對不同的因素做了一個影響力分析，請見下圖：

在哪里查看轉(zhuǎn)換率？

如果你的應用是在 Google Play 發(fā)布的，在“Acquisition Reports”標簽下即可查看自然下載的轉(zhuǎn)化數(shù)據(jù)。Google Play 可以顯示基準數(shù)據(jù)，讓你查看自己的 App 與同類應用表現(xiàn)的差距。

如你所見，如果你的應用轉(zhuǎn)化在所屬類別中的平均值之下，Google 會告訴你，你還有多少下載量的差距。

要查看 iOS 商店的轉(zhuǎn)化率，請打開 “Analytics” 頁面，然后點擊“轉(zhuǎn)化率”。 選擇此選項后，圖表將顯示每日的轉(zhuǎn)化率。

如果你想在 iOS 控制面板只看到自然用戶的數(shù)據(jù)，請為“App Store Browse”或“App Store Search”設置過濾器，如下所示：

1.?肉眼觀察法

這種方法勉強稱之為 A / B 測試吧，但還是可以了解到哪些素材的表現(xiàn)更好。如果你期待看到很明顯的轉(zhuǎn)化率提升效果，建議不要依賴使用這種方法。

優(yōu)點

• 免費
• 簡單易上手，只需上傳新素材，等待幾周，然后比較前后的轉(zhuǎn)換率

缺點

• 效果不準確，反彈嚴重
• 即便不做測試，轉(zhuǎn)換率的波動每月也會高達50％，會誤導測試假設

無發(fā)布前測試

你必須先發(fā)布產(chǎn)品，才能使用此測試方法。比較適合已經(jīng)穩(wěn)定的產(chǎn)品。

測試周期長

為了看到明顯的效果，你必須留出足夠長的時間來收集數(shù)據(jù)，少說兩三周，多則一兩月。

這種方法適用于哪種情況？

• 你的應用僅發(fā)布于 iOS 平臺
• 沒有付費廣告的預算
• 沒有網(wǎng)站的登錄頁面可以運行測試
• 你百分之百確定新的變化將提高轉(zhuǎn)化率

2.?Google Play 的 A / B 測試

如果你的App發(fā)布于 Google Play，可以使用這個方法。

在 Google 后臺，你可以對圖標、描述、功能圖形，截圖和促銷視頻等進行A / B測試。

設置 Google 測試很簡單。打開 Google Play 信息中心，然后點擊此處：

這里有兩種測試類型：

全球范圍：全球測試會向全球所有用戶展示你的測試素材。比較適合不涉及文本（如圖標）的元素，不會因為語言不通產(chǎn)生理解上的問題。

本地測試：僅針對目標語言的用戶展示本地化測試。適合測試包括文本類（如標題）的元素，測試的人群會更精準。

設置好了測試項并開始運行，它應該是這樣的：

測試開始后，你能做的就是等待。當測試達到90％的置信度時就會結(jié)束，你的數(shù)據(jù)就可用了。以下是 Google 關(guān)于如何在 Store Listing 中運行 A / B 測試的文檔，可供您參考：

https://support.google.com/googleplay/android-developer/answer/6227309?hl=zh-Hans

優(yōu)點

• 免費
• 數(shù)據(jù)準確。來自Google 官方的數(shù)據(jù)可靠度還是杠杠滴。當然，統(tǒng)計學意義和“90％置信區(qū)間”允許出現(xiàn)一些誤差。
• 操作方便。只需要提交你需要測試的內(nèi)容素材即可

缺點

• 僅適用于Google Play。希望蘋果公司能夠發(fā)布自己的 A / B 測試工具，但目前只是夢想
• 如果你在 Google Play 和 iOS 商店中都有應用，可以使用 Google Play 商店的 Store Listing 進行測試，然后將最好的結(jié)果應用于 iOS 商店

無發(fā)布前測試

你需要先發(fā)布的應用，再進行測試。

適合哪種情況

你的應用在Google Play上發(fā)布

3. 第三方測試軟件

如果你手里有預算，我們建議你使用像 SplitMetrics，Storemaven 或 Test Nest 之類的第三方測試服務來模擬應用商店頁面進行A / B 測試。根據(jù)我們的經(jīng)驗，他們給出的分析報告算是比較專業(yè)的。

你只需要創(chuàng)建測試活動，然后設置好變量，觀察效果即可。

例如，你可以創(chuàng)建兩個模擬應用頁面，每個頁面都有不同的圖標。通過 Facebook 廣告或其它任何流量來源，查看哪一個轉(zhuǎn)化最好。用戶點擊模擬應用頁面上的“安裝”后，將被引導到產(chǎn)品的登錄頁，如果用戶感興趣，會在這里注冊并留下自己的賬戶信息。

以下是 Illusion Labs 進行的一個實驗，他們測試了 3 種不同圖標的效果。

正如你所看到的，第一個版本的圖標轉(zhuǎn)換效果是最好的，這也是他們最后采用的圖標。

優(yōu)點

• 可以做預發(fā)布測試。在 App 正式發(fā)布之前就可以測試一些元素
• 允許一次測試更多的變量
• 支持使用像 AppsFlyer 這類歸因鏈接來跟蹤用戶行為。比如用戶下載之后的購買行為等

例如，也許變量 A 比變量B的轉(zhuǎn)化高 10％，但 AppsFlyer 的數(shù)據(jù)顯示，看到變量B比變量A的用戶多消費了 20％。你會選哪個變量？當然是變量 B 啦！

缺點

• 費用支出不能少，運行測試所需軟件的價格是每月? ?$149（TestNest）起
• 測試的過程中會有用戶流失。當用戶點擊模擬應用頁面上的“安裝”時，他們并沒有被直接跳轉(zhuǎn)到真實的應用下載界面，而是需要兩次或多次點擊和跳轉(zhuǎn)。在此過程中，就會有一部分用戶流失

這種方法適合哪些情況？

• 多適用于 iOS 平臺的應用
• 預發(fā)布 A / B 測試
• 有測試預算，并且同時開啟付費廣告活動

4. 付費廣告素材測試

付費廣告即 Facebook 廣告或其它廣告聯(lián)盟提供的推廣服務。如果你有投放廣告的需求，那你就有對廣告素材進行 A / B 測試的需求。

運作模式就是同時投放多組廣告素材，直接使用 Facebook 廣告來測試你的廣告素材?？雌饋硐襁@樣：

Facebook 以外的其它廣告聯(lián)盟，也可以在廣告中測試圖標、描述或截圖。

例如，如果使用 Chartboost，你可以測試這些：

以下是 Chartboost 的其他鏈接：通過社交元數(shù)據(jù)將你的移動廣告轉(zhuǎn)化率提升高達 15％。

優(yōu)點

• 比第三方測試軟件便宜
• 支持預發(fā)布測試
• 可以一次測試多個變量。

缺點

• 結(jié)果會有偏差。雖然這種方法可以幫助你了解最佳轉(zhuǎn)化方式，但數(shù)據(jù)比起專業(yè)測試軟件還是不夠準確。這是因為廣告與應用商店頁面的展示效果不同，用戶看到的內(nèi)容也不同

這種方法適用于哪種情況？

• 多適用于 iOS 平臺的應用
• 需要進行預發(fā)布測試的應用
• 有廣告投放預算的應用

5. 登錄頁上的 A/B 測試

如果你的應用有一個獨立的登錄頁，這里也可以用來測試不同的圖形元素哦。

你可以使用 Optimizely 或 Google 優(yōu)化等服務在登錄頁上直接對圖標、截圖、描述、標題甚至價格進行測試。比如下圖這樣：

優(yōu)點

• 支持發(fā)布前測試
• 如果你已經(jīng)設置了一個網(wǎng)站并開始運行，你需要做的就是安裝 A / B 測試工具并運行測試

缺點

• 由于網(wǎng)站上的上下文與實際的應用商店頁面不同，因此結(jié)果可能會有偏差
• 昂貴又耗時。至少要有一個可用的登錄頁，其次這個網(wǎng)站的流量還要大

這種方法適用于哪些情況？

• 多適用于 iOS 平臺的應用
• 需要進行預發(fā)布 A / B 測試
• 有可用的登錄頁面，以及足夠的流量可以運行 A / B 測試

6. 應用墻測試

如果你的品牌下有多個應用，那你可以在自己的另一個應用中設置一個應用墻，以交叉推廣自己的不同應用。順便，還可以再這里做做測試。

優(yōu)點

• 免費。設置好了應用墻，所有當前用戶都將免費為你做 A / B 測試！

缺點

• 由于環(huán)境與實際的應用商店頁面不同，因此結(jié)果可能會偏差
• 根據(jù)你用戶量的限制，測試需要的周期會被拉長

這種方法適用于什么情況？

你至少需要一個用戶量還不錯的同類應用

7. 社交媒體投票測試

你可以在 Facebook 小組、Subreddits 這些地方發(fā)起投票測試，甚至可以向朋友和家人展示變量。比如這樣：

這里有一些可以發(fā)起發(fā)起投票的平臺：

• Facebook – 應用企業(yè)家和營銷組
• Reddit – 反饋請求示例
• Pickfu（付費）- 能為你提供變量的比較結(jié)果。只需 20 美元就可以獲得 50 份投票

優(yōu)點

• 便宜、易操作。將你的投票問卷發(fā)送給一群人即可。即使是付費投票，也會獲得性價比很高的投票結(jié)果
• 可以獲得投票者的反饋

缺點

• 準確度不高。通常情況下，他們可能會選擇最漂亮或炫目的圖標，但不見得就是轉(zhuǎn)化率高的圖標

這種方法適用于哪種情況？

• 多適用于 iOS 平臺的應用
• 需要收集用戶反饋

結(jié)論

現(xiàn)在無論你的產(chǎn)品在什么平臺發(fā)布，你都沒有理由不做 A / B 測試了。

最后一個建議是，你可以先從定性方法（如投票）開始測試，以確保方向正確。

如果你的應用尚未發(fā)布，你正在猶豫在圖標和截圖到底用哪一版。不妨來一波測試看看大家的選擇是什么。

本文由 @ASO+ 原創(chuàng)發(fā)布于人人都是產(chǎn)品經(jīng)理。未經(jīng)許可，禁止轉(zhuǎn)載。

題圖來自PEXELS，基于CC0協(xié)議