楠木軒

如何通過增長實驗發現增長點?

由 段幹方 發佈於 科技

編輯導讀:在流量紅利即將消失的今天,想要做好用户增長就必須要做好精細化運營。其中,增長實驗是非常重要的驅動增長的方式。那麼,如何通過增長實驗發現增長點?本文作者將對此進行分析,希望對你有幫助。

現在流量紅利已消失,需要精細化運營實現用户持續有效增長。增長實驗是非常重要的驅動增長的方式。它的作用是驗證產品、運營動作與增長數據之間的因果性。常用A/B測試的方法來驗證方案是否能夠真的驅動用户增長。很多產品、運營人員都知道增長(實驗)黑客,但具體操作應用還是不瞭解或熟悉。下面以實際案例進行講解。

首先,我們需瞭解增長實驗的全流程。

在進行增長實驗前,我們得了解增長實驗的流程,以便有效推進實驗。小編身邊不少運營朋友公司團隊通常做項目時,決策全憑經驗及主觀判斷,一旦決策就直接實施。這會導致團隊盲目執行,很容易出現做項目時,消耗大量時間成本,但最終效果沒有達到預期。

一、增長實驗全流程
  • 明確我們做實驗的目的(目標)是什麼,這就是需要我們明確這階段的工作重點指標,也就是大家常説的“北極星指標”,用來指導我們這階段的工作方向。
  • 增長模型應用常有全鏈漏斗模型、因子分解模型。增長模型就是我們需要找到影響北極星指標的所有細分的指標,並把這些細分的指標聯繫起來,這就是我們所構建的增長模型。
  • 找到聚焦領域,所謂的聚焦領域就是通過構建的增長模型找到可以大幅提升增長的爆發點。對這個聚焦領域記性中長期(0-120天)增長驗證,通過不斷的實驗驗證,得出準確的爆發點並加以放大,最終達到產品增長的效果。
1. 增長實驗流程

第一步:產生實驗想法

從聚集領域出發,產生高質量的實驗想法。通過從數據中通過洞察的方式,來幫助提高實驗的成功率。從而形成一個比較清晰的實驗假設。以及形成一個實驗想法庫。

第二步:確定優先級排序

針對實驗想法庫中各種想法,通過排序模型進行實驗優先級排序。

第三步:設計增長實驗

有了具體進行實驗的想法後,進行細化變成一個可落地的實驗方案(開發PRD)。這一步主要是講述制定實驗指標,確定實驗受眾以及設計實驗版本,避免遺漏影響實驗結果的重要方面。

第四步:實驗開發上線

制定數據埋點後,開發實驗並上線後可根據埋點數據清晰衡量實驗結果。

第五步:分析實驗結果

得到結果後,如何通過系統性方法分析實驗結果,評估實驗結果的可信性並得出可信結論,並放大該結論的實驗影響。

2. 設計增長實驗

小編結合曾經做過項目來給大家講述如何展開增長實驗,能幫助大家更好地瞭解。小編曾經負責一個智慧停車的公眾號增長項目,需要在一年內完成1400萬的粉絲增長。對目標進行了拆解,而我的項目團隊要負責的是提高公眾號的留存率。

實驗背景&目的:

在設計增長實驗前,我們通過分析數據發現用户在關注公眾號臨停繳費後,大部分用户都會在1-2天內取關公眾號。因此我們需要提高用户留存率,那問題也來了,影響用户留存率有哪些因素及對應的策略呢?我們團隊為此進行了頭腦風暴,想了各種想法和假設,希望通過實驗來驗證。這就是我們產生實驗的最基礎想法。

1)提升用户對公眾號的留存率

已知當前日均使用公眾號臨停繳費人數10萬

已知當前日均公眾號關注人數1000人,次留率60%,目標提升至80%

統計顯著性需要達到95%

2)實驗前準備-定義指標

【(次日/7日/14日)留存率】定義:用户(次日/7日/14日)關注數/用户(首天)累計關注數

核心指標:次日/7日/14日留存率

反向指標:次日/7日/14日取關率

輔助指標:假設1關注功能鏈接的點擊量、頁面停留時長、功能完成數量

假設2關注鏈接訪問人數、領取人數、使用人數

3)增長實驗

步驟1:提出實驗假設

假設1:

【如果】在關注公眾號後以文字的形式推送產品功能介紹

【預計】次/7日/14日留存率可以提升40%

【因為】

用户被動關注公眾號,都是在很短的時間通過公眾號完成繳費,沒有過多地瞭解熟悉產品。

關注公眾號的核心目標是建立起與用户的連接,向用户推送更多的停車場景業務。若用户無法瞭解或體驗產品給用户帶來的價值,對用户來説關注多一個公眾號就莫名增加一個消息打擾。

用户要自己花更多的時間去了解和學習產品的功能價值,在潛意識上會把關注當成一個相對較重的操作。關注後推送介紹信息,能縮短用户的自我探索成本,簡單明瞭地瞭解到產品給其帶來的價值。

定量分析:

用户在公眾號推送信息的功能鏈接點擊數量

用户在公眾號功能鏈接中使用數量

假設2

【如果】在關注公眾號後向用户推送領取停車券的鏈接

【預計】次/7日/14日留存率可以提升60%

【因為】

用户領取停車券後,讓用户產生捨棄成本不輕易取消公眾號

停車券有效期失效前3天、1天,系統自動觸發信息提醒用户使用,會激活此部分沉默用户。

停車券可以讓用户多次使用,在用户心智上形成品牌意識,從而增加用户粘性。

定量分析:

用户通過公眾號消息推送領取停車券數量

用户使用了停車券數量

實驗受眾:

首次關注公眾號用户

4)實驗設計(A-B測試)

實驗分為3組進行測試,1個是保持不變,另2個是首次關注分別推送產品功能介紹信息和推送領取停車券鏈接。

實驗時間:

30天為2個測試周期

實驗結果分析:

參照上表中的數據,基本上可以説明該策略能夠有效提升公眾號留存率。後續實驗可以測試不同時效的停車券對用户停留時長是否有更大的提升。(由於涉及到數據保密性就不展示具體數據了)

本文由@Ja 原創發佈於人人都是產品經理,未經作者許可,禁止轉載。

題圖來自Unsplash,基於CC0協議