【Mr. PM X 思想科技】活動 Amplitude Compass 功能,定義產品 Activation 指標 ~ Part 3

特邀作者: Mr. PM (曾友志)

Mr. PM 是一位資深的產品與增長顧問,擁有豐富的產品企劃、產品增長、數據分析以及建構數據驅動的敏捷產品團隊等方面的專業經驗。 >”>個人專欄>>

上一篇 【Mr. PM X 思想科技】活用 Amplitude Compass 功能,定義產品 Activation 指標 ~ Part 2 有提到,用戶有很多行為,都和留存有正相關,通常的做法就是「天數」+「行為」+「次數」三個變數來組成指標,你可以列出一堆可能的指標所以會衍生出很多可能是 Activation 指標,例如:

「聽1首歌,在註冊當天」

「聽1首歌,在註冊七天內」

「在七天內,參加一個音樂社團」

「在七天內,建立一個音樂播放清單」

「在七天內,將自己個歌單分享給自己朋友」…

這些指標,到底哪一個是最有詮釋力的指標?我們需要手動一個一個計算嗎?有沒有更有效率的方法呢?

超好用的 Amplitude Compass 功能

幸好的是,Amplitude Compass 已經幫我們把這個繁瑣的計算過程,直接做好,有多方便呢?我們可以看一下面這個示意圖

介面非常簡單,三個步驟

  1. For Users in the following cohort 你選 New User
  2. How does performing 你選 Any event
  3. 最後在 Predict they will be in the following cohort 你可以選 2nd week retetnion,或是你要選 4th week retention 也可以。

這樣三個步驟,就可以讓 Amplitude 幫你計算過所有和 Retention 有關的指標。

這邊不得不說一下 Amplitude 的介面設計真的很好懂,介面就說得很明白,就是在找兩個圈圈的重合程度。操作的第一步驟和第二步驟的的意思就是把所有 event 都跑過一次,畫出黃色圈圈或藍色區圈,第三步驟是在選 Retained user 的定義,也就是畫出灰色圈圈,看你要 2nd week retention 或是 4th week retention 都可以。

解讀 Amplitude Compass 的數據

Amplitude Compass 跑下去,會產出許多數據,以下圖為例,這些都是相關係數,一般來說,大於 0.2 就算正相關,若大於 0.4 就可稱為高度正相關。

要注意一下,相關係數不是越大越好,反而是刪去法,一開始先刪去低於 0.4 的,然後再刪除那些在邏輯上不通、沒有因果關係的,以下圖為例 End Session 和 Start Session 就會被刪除,因為這些事件和 A-ha moment 在邏輯上並無因果關係。剩下的就是潛在有機會的 Activation 指標。

以上圖為例,就是 Search、Play、Select Songs or Video 三個事件。

剩下的三個指標候選人當中,又該怎麼挑選呢?回到下面這張圖,我們要找的是重合度最好的,就數學上來說,就是要考慮 PPV (positive predictive value)、sensitivity 和 NPV (Negative Predictive Value),PPV 代表的是符合指標的人,有多少比例的人真的 Retained,以下圖來說,黃色圈圈的Search 的 PPV 是最好的,但我們可以知道,search 並不是重合度最好的,

所以除了 PPV 之外,我們還要看 sensitivity。

sensitivity 指的是代表的是符合指標且有 Retained 的人,和不符合指標但 Retained 的人的比例,這個值是越大越好。以 sensitivity 來看,Select 是最好的,但但我們可以知道,select 並不是重合度最好的,所以 PPV 和 sensitivity 要一起看,找出一個最佳的平衡,那就是 Play。

同樣的道理,我們可以繼續用不同天數,然後都是 Play 來比較,如下圖:

以 PPV 和 sensitivity 來看,7天和14天 play 一首歌都不錯,那該怎麼選指標呢?

那就要再看 NPV了,NPV 就是指預測不會 Retain 然後真的不會 Retain 的比例,以7天 Play 一首歌和 14 天 Play一首歌來看,就是比不重合的比例,很明顯 7 天 Play 一首歌的 NPV 應該會比較高。

小結:指標選擇的藝術

選擇 Activation 的指標,有三個要件

  • 在邏輯上符合因果關係,這個事件在邏輯上可以讓用戶感受到 A-ha moment
  • 和 Retained 有正相關
  • PPV 和 sensitivity 的組合度最好

但我在這邊還是要提醒一下,選出了指標之後,還要考慮組織內溝通的問題,不一定是數據上表現最好的指標獲選為 Activation 指標,而是要好記、好溝通,好記好溝通的指標,在組織內執行起來比較容易到位。

舉例來說,若最後做出來的指標是 6 天內 Play一首歌是數據上表現最好的指標,那最後的 Activation 應該定義成「七天內Play一首歌」,比較符合一般人的認知週期,會比較記得住,執行上就是每次一週開一次會議來 review,實際執行落地也比較方便。

一個能被執行落地的 Activation 指標,才是最重要的。

Leave Us Your Message.
We are ready to talk!

歡迎您與我們聯絡。
我們會協助您取得最佳解決方案!

歡迎您與我們聯絡。
我們會協助您取得最佳解決方案!

Leave Us Your Message.
We are ready to talk!

找不到您需要的? 加入我們的最新活動!

搶先了解
新趨勢