成人怡红院-成人怡红院视频在线观看-成人影视大全-成人影院203nnxyz-美女毛片在线看-美女免费黄

站長資訊網
最全最豐富的資訊網站

增長案例丨為 Keep 設計一場增長實驗


每套方法論都有自己的邏輯閉環和不同的適用場景,也存在在執行時仍然存在的困惑,根據自己遇到的困惑,拆解輸出的方法論理解消化后輸出自己的方法論,才是最合適的做法。

增長案例丨為 Keep 設計一場增長實驗

增長是一個持續實驗的過程,就像做產品迭代,最科學的方法是向迭代要數據,依據數據做迭代;做增長亦是如此,即數據驅動增長。

策略、增長都有各自的方法論,抽象出來其實表達的是相似的意思。

通過數據發現問題→提出假設→設計方案→獲得更多數據→驗證假設→發現顆粒度更細的問題→提出更精準的假設。

是無數組閉環邏輯的循序漸進,根據實際達到的效果以及成本,來決定做到哪一步就可以滿足目標或者需要及時止損。

每套方法論都有自己的邏輯閉環和不同的適用場景,也存在在執行時仍然存在的困惑,根據自己遇到的困惑,拆解輸出的方法論理解消化后輸出自己的方法論,才是最合適的做法。

增長案例丨為 Keep 設計一場增長實驗

增長實驗通常以A/B測試的方式進行,要清楚A/B測試只是手段不是目的,在日常生活中也可以加以利用。

增長案例丨為 Keep 設計一場增長實驗

2. 設計增長實驗前,如何發現問題

2.1 有明確目標(根據目標找數據)

有明確目標的意思是,促使實驗發起的需求來源不是分析數據后發現的問題,而是通過其他需求來源提出的明確的可衡量的目標。

比如老板下達任務,這個季度的GMV要提升30%。那么關鍵指標可定義為2020Q1GMV,相關指標可以在已經搭建好的增長模型或者公式中獲得。

GMV等于流量*轉化率*客單價,流量包含自然流量和渠道流量等,自然流量包含產品本身的APP、小程序等,渠道流量包含各個外部渠道。

根據實際情況選擇對應的顆粒度分析。

增長案例丨為 Keep 設計一場增長實驗

2.2 無明確目標(根據數據找目標)

無明確目標的意思是,促使實驗發起的需求來源,并不聚焦于某一個具體目標,我們想通過優化某一個當前需要優化的內容,從而達到提升整體效果的終極目標。

此時為了避免拍腦袋定方案,設計出低質量的實驗浪費資源,就要通過一些科學方法找到相對合理的目標。

a.收集用戶反饋

在產品的用戶反饋入口、應用商店評價、社交平臺等渠道收集用戶反饋。

通過對用戶反饋的過濾、整理、分析,發現與增長相關的問題,以解決此問題為目標設計增長實驗。

用戶的反饋比較隨機,難以判斷影響面,與產品全局沒有直接關系,因此可能需要其他手段進一步驗證,著重思考優先級的排序。

增長案例丨為 Keep 設計一場增長實驗

b.系統監控

在數據體系較為完善的系統中,可以通過監控發現問題。

提前設置好監控指標和報警規則,是在一段周期內一勞永逸的方式,提升發現問題的效率,降低需求分析的成本。

比如某成熟期的社區產品的日留存率平均在30%,如果每天的留存率在正常波動區間內,我們便可以將精力用在其他地方,如果留存率不在正常波動區間,即出現異常(一般指留存率偏低的情況)。

首先要根據業務實際情況確定是否真的是異常情況,如果確定是異常情況,可能會通過增長實驗,來將異常數據拉回正常區間;如果不是異常情況,可能需要調整報警規則。

比如K12類產品,在周末活躍度對比周一至周五下降,或者購票類產品在假期過后活躍度下降,通常屬于正常情況。

增長案例丨為 Keep 設計一場增長實驗

c.定期復盤

復盤的方式可以具象為效果回歸。效果回歸是驗證在之前的增長動作中,有沒有達到目標。如果達到,探索進一步優化的空間;如果沒有達到,分析原因,嘗試通過接下來的增長動作達到目標。

增長案例丨為 Keep 設計一場增長實驗

3. 增長實驗案例丨KEEP社區

3.1 實驗背景&目的

(1)提升用戶對其他用戶關注率

增長案例丨為 Keep 設計一場增長實驗

  • 已知當前動態詳情頁(動態、文章、視頻)的日均PV為10000
  • 已知當前動態詳情頁(動態、文章、視頻)的關注率為5%,目標提升至6%
  • 統計顯著性需要達到95%

統計顯著性在這里不深入展開,市面上有專門的統計工具,通過搜索引擎即可找到

(2)實驗前準備-定義指標

【(年/月/日)關注率】定義:用戶累計(年/月/日)關注數/用戶(年/月/日)累計瀏覽內容來源其他用戶數。 (對一個用戶生產的多條內容做去重)

【瀏覽】定義:對應內容在一屏中露出60%。在頁面中停留時間≥5s。

3.2 增長實驗

步驟1:提出實驗假設

假設1:

【如果】在社區feed流中增加關注按鈕

【預計】月關注率可以提升20%

【因為】

  • 社區feed流是第一層級頁面,跳出率最低,縮短了轉化路徑。
  • feed流的核心目標就是吸引用戶更長時間的沉浸體驗。目前的關注需要在更深一層級的【添加好友】或【動態詳情】中操作,某種程度上打斷了用戶的心流。按鈕放在feed流上可以使體驗更流暢。
  • 用戶做更多操作去關注一個用戶,在潛意識上會把關注當成一個相對重的操作,將關注按鈕放到feed流中,使用戶不需要像在【添加好友】中篩選和在【動態詳情】中查看更多內容,僅通過feed流中的一條動態便確定關注意愿,細化了關注的場景,滿足了追求多樣性和把關注看的不那么重的用戶。也是產品需要潛移默化影響用戶心智的方向。

最佳實踐:

抖音feed流中可以直接關注發布者

增長案例丨為 Keep 設計一場增長實驗

定量分析

  • 用戶在【feed流>動態詳情>feed流>動態詳情】(循環)路徑中點擊關注的數量
  • 用戶在feed流中給非關注用戶動態點贊后,關注該用戶的數量

假設2

【如果】增加邏輯:點贊默認同時關注,個人中心可設置點贊是否同步關注

【預計】月關注率可以提升30%

【因為】

  • 與上條一樣,產品需要引導用戶的是不把關注看做是一個很重的操作,從而使用戶更多的進行關注。
  • 點贊和關注,在不同的社區運營過程中,含義的演化各不相同;可設置的點贊是否同步關注邏輯,是將選擇權還給用戶,滿足對這兩者不同理解的多種用戶群體需求。
  • 對于在feed流中根據一條動態便確定關注意愿的用戶來說,當前需要操作三步(點贊、點擊動態、關注)才能完成點贊+關注。使用假設后只需要點贊一個動作,操作多個時,指數級的降本增效。

最佳實踐

通常情況,縮短轉化路徑可以提升轉化率。

微博有類似的邏輯,通過內容吸引用戶關注發布者。

增長案例丨為 Keep 設計一場增長實驗

增長案例丨為 Keep 設計一場增長實驗

定量分析

  • 用戶在【feed流>動態詳情>feed流>動態詳情】(循環)路徑中點擊關注的數量
  • 用戶在feed流中給非關注用戶動態點贊后,關注該用戶的數量

假設3

【如果】為游客開放瀏覽社區和關注用戶&話題權限。(登錄后選擇是否同步關注數據,根據終端同步)

【預計】月關注率可以提升5%

【因為】

  • 用戶不需要登錄即可進行瀏覽,縮短了轉化路徑
  • 但是對于一個產品來說,用戶的登錄代表了最基本的興趣和信任,一直處于游客狀態的用戶并不會很多也不會很活躍

最佳實踐

對于游客用戶也可以使其產生粘性和沉默成本,拿出誠意,先給用戶價值,尋求用戶未來的登錄。

好奇心日報,未登錄狀態下可以做瀏覽、收藏、參與研究等操作。

增長案例丨為 Keep 設計一場增長實驗

定量分析

  • 下載量
  • 登錄頁UV
  • 登錄用戶數

假設4

【如果】類似微博,登錄成功后,引導填寫簡單用戶問卷(健身側重內容),根據用戶個人情況推薦關注表單。

【預計】月關注率可以提升25%

【因為】

  • 微博、站酷、好好住等各領域社區APP已經教育出用戶習慣,比較易于接受,用戶的問卷反饋可以應用于內容推薦和push等策略,帶來更精準的促活
  • 但是根據keep的商業模式以及當前的一級頁面C位(運動)可以很清晰的看出,KEEP的核心還是工具屬性;
  • 因此是否提升社區的權重,需要戰略層面的權衡

最佳實踐

微博的各種引導關注&自動關注機制,需要權衡差異選擇性參考。

增長案例丨為 Keep 設計一場增長實驗

定量分析

  • 用戶分層:瀏覽內容時間與使用運動功能時間占比大于2:1的用戶比例

步驟2:ICE模型打分,制定優先級

增長案例丨為 Keep 設計一場增長實驗

優先級:假設1>假設2>假設4>假設3

打分依據-預期影響

增長案例丨為 Keep 設計一場增長實驗

打分依據-成功概率

增長案例丨為 Keep 設計一場增長實驗

打分依據-容易程度

增長案例丨為 Keep 設計一場增長實驗

步驟3:實驗設計

避免內容重復,這里再引入一個新的實驗假設講解后續內容

1)實驗假設

【如果】用戶在動態詳情中停留5s以上,關注按鈕變亮變大。

【預計】月關注率可以提升20%(5%→6%)。

【因為】停留可以反應出用戶對內容的興趣,從而說明對發布者的興趣;5s的時候用戶興趣比較濃厚又未完全沉浸在內容中,此時關注按鈕發生視覺變化既提醒用戶關注又不會過分干擾造成反感。

最佳實踐

(同假設2)微博有類似的邏輯,通過內容吸引用戶(強提醒)關注發布者。

增長案例丨為 Keep 設計一場增長實驗

增長案例丨為 Keep 設計一場增長實驗

定量分析

  • 用戶在文章詳情&動態詳情中停留5s以上后,關注發布者的數量和比例。
  • 用戶關注發布者時在詳情中停留的平均時長。

2)實驗指標

增長案例丨為 Keep 設計一場增長實驗

【月關注率】定義:用戶當月累計關注數/用戶當月累計瀏覽內容來源其他用戶數。 (對一個用戶生產的多條內容做去重)

【瀏覽】定義:對應內容在一屏中露出60%。在動態詳情頁中停留時間≥5s。

因為實驗的改動是在動態詳情中的3個頁面(動態、視頻、文章),因此實驗前后的數據對比僅統計此部分數據差異;確保不會被其他因素干擾。

核心指標:(上面3個頁面依次編號1、2、3)頁面1月關注率、頁面2月關注率、頁面3月關注率。

反向指標:頁面1月取關率、頁面2月取關率、頁面3月取關率。

【取關率】定義:用戶在對應頁面中關注后又取消的數量/用戶在對應頁面中關注數。

輔助指標:(上面3個頁面對應依次1、2、3)頁面1關注平均停留時長、頁面2關注平均停留時長、頁面3關注平均停留時長。

【停留時長關注比】用戶在對應頁面中關注,平均需要停留的時間。

與實驗的5s對比,衡量5s這個時間點發生的按鈕樣式變動,對用戶最終關注的影響程度。

3)實驗受眾

  • 有關注習慣用戶
  • 無特定習慣用戶
  • 無關注習慣用戶

【有關注習慣用戶】定義:關注數/活躍(進入社區)天數≥1(每活躍1天,新增1個關注)

【無特定習慣用戶】定義:0.3<關注數/活躍(進入社區)天數<1

【無關注習慣用戶】定義:關注數/活躍(進入社區)天數≤0.3

4)實驗設計-A/B測試

a. 版本劃分及原因

3個版本:

增長案例丨為 Keep 設計一場增長實驗

  • 從策略層面細化,可以考慮27種組合(3組用戶3個頁面3種樣式),然后評估操作成本。在案例中,僅考慮文章詳情頁。
  • 變化幅度大的樣式對應強提醒,側重目標轉化。樣式例如:按鈕變大50%,顏色明顯變化+動效。
  • 變化幅度小的樣式對應弱提醒,側重體驗連貫。樣式例如:按鈕變大20%,顏色輕微變化。

(該階段的思維發散僅做思路展示,后面兩個時間的計算不考慮中間涉及到的拆解用戶組)

b. 如果將文章詳情的【月關注率】提升到6%

已知當前關注率5%,目標提升至6%,統計顯著性需達到95%,文章詳情每日UV10000。

  • 【有關注習慣用戶】【無提醒】
  • 【有關注習慣用戶】【弱提醒】
  • 【有關注習慣用戶】【強提醒】
  • 【無特定習慣用戶】【無提醒】
  • 【無特定習慣用戶】【弱提醒】
  • 【無特定習慣用戶】【強提醒】
  • 【無關注習慣用戶】【無提醒】
  • 【無關注習慣用戶】【弱提醒】
  • 【無關注習慣用戶】【強提醒】

每組流量分配:10000/9≈1111

剩余名額全部劃分至【有關注習慣用戶】【無提醒】,實驗無結論前,減少對活躍用戶的影響。

實驗時間

通過工具計算得出:6900/1111≈6.2天,取整數7天。

增長案例丨為 Keep 設計一場增長實驗

5)分析實驗結果

實驗組:是接受實驗變量處理的對象組。

對照組:對實驗假設而言,是不接受實驗變量處理的對象組。

關注點:

  • 實驗組和對照組的流量是否平均,是否獲取到了足夠的樣本數
  • 實驗周期是否足夠長,是否受到周末、節假日影響;是否受到用戶的新鮮感影響
  • 每組中是否覆蓋了全部用戶類型(高、中、低頻)
  • 實驗組的核心指標對比對照組是否提升、輔助指標是否提升或持平、反向指標是否提升造成負面影響
  • 核心指標是否達到統計顯著性要求(搜索引擎中即可找到第三方統計工具)

6)實驗下一步

開啟新的循環

 

贊(0)
分享到: 更多 (0)
?
網站地圖   滬ICP備18035694號-2    滬公網安備31011702889846號
亚洲伊人久久大香线蕉综合图片| 亚洲国产AⅤ精品一区二区30P| 狼人视频国产在线视频WWW色| 亚洲中文字幕无码人在线| 亚洲日韩乱码中文无码蜜桃臀| 天码人妻一区二区三区| 欧美熟妇精品一区二区三区| 久久人人爽人人爽人人片AV超碰 | 日韩国产女人久久久| 老师穿着旗袍肉色丝袜让我玩| 好吊妞国产欧美日韩免费观看| 公天天吃我奶躁我的比视频| AV优选天堂污污污成人亚洲| 用舌头去添高潮无码AV在线观看| 亚洲欧美日韩、中文字幕不卡| 亚洲AⅤ熟女五十路中出| 少妇高潮无套内谢麻豆传| 人妻激情偷乱视频一区二区三区| 免费观看大片的APP视频| 久久久久无码精品国产蜜桃| 黑人巨茎迎战白嫩少妇| 国产亚洲AV寡妇| 国产精品99久久久久久人| 丰满少妇A级毛片野外| 差差差软件大全APP推荐免费| JAVA强行VIDEOS| JAPANESE国产中文在线观| BBW厕所白嫩BBWXXXX| 69风韵老熟女口爆吞精| 中文日本字幕MV在现线观看 | 免费无码高潮喷水AⅤ片在线| 久久夜色精品国产网站| 久久久午夜成人噜噜噜| 人妻 日韩 欧美 综合 制服| 人妻av一区二区三区| 无码人妻精品一区二区三区99仓 | 国产美女裸体无遮挡免费视频高潮| 国产成人精品午夜福利在线播放 | 秋霞午夜无码鲁丝片午夜| 无码人妻少妇久久中文字幕| 永久免费AV无码网站在线观看| 亚洲综合无码久久精品综合 | 久久久久久久性潮| 噜噜噜亚洲色成人网站∨| 免费无码AⅤ片在线观看| 色五月五月丁香亚洲综合网| 色悠久久久久综合欧美99| 亚洲精品中文字幕无码专区| 亚洲伊人久久综合成人网站| 成AV人电影在线观看| 激情综合激情五月俺也去| 激情人妻另类人妻伦| 强开小婷嫩苞又嫩又紧韩国视频| 日本国产一区二区三区在线观看 | 暴躁CSGO妹子| 高清人人天天夜夜曰狠狠狠狠| 疯狂做爰XXXⅩ高潮69短| 久久99久久99精品免视看动漫| 九九视频麻婆豆腐在线观看| 久久综合给合久久国产免费| 色欲av蜜臀一区二区四区| 亚洲中字幕日产2021草莓| 丰满性熟妇ⅩXXOOOSEX| 六月丁香婷婷色狠狠久久| 无套内谢少妇毛片免费看看| 亚洲AV永久无码精品无码一区二区| 亚洲色无码中文字幕手机在线| 中文字幕乱偷无码AV先锋| 啊灬啊灬啊灬啊灬高潮了| 公玩弄年轻人妻HD| 麻豆AV无码精品一区二区| 无遮挡又黄又刺激又爽的视频| Japanese日本护士XXXX18一19| 精品国产免费人成网站| 免费观看高清日本AⅤ| 性高湖久久久久久久久| 婬乱丰满熟妇XXXXX| 国产精品美女一区二区视频 | 国产精品WWW夜色视频| 年级老师的滋味4| 熟妇的滚烫的肉唇翻进翻出| 亚洲成在人线AV自拍| 最新 国产 精品 精品 视频| 成人欧美激情亚洲日韩蜜臀| 国色天香精品卡一卡二卡三二百 | 游泳教练在水里含我奶小说| 国产午夜福利片1000无码| 日本熟熟妇XXXXX精品熟妇| 亚洲AV成人综合网久久成人| 伊人久久大香线蕉在观看| 国产三级在线观看播放| 门卫老头吮她的花蒂| 熟女亚洲综合精品伊人久久| 亚洲欧美日韩国产成人精品影院| 国产99久久久国产精品成人小说| 欧美色成人综合天天影院| 用舌头去添高潮无码AV在线观看| 娇妻借朋友高H繁交H| 亲孑伦视频一区二区三区视频| 伊人涩涩涩涩久久久AV| 娇小VIDEOS出血| 性少妇JAPANESEXXXX| 99热国产这里只有精品无卡顿| 国产成人无码H在线观看网站| 久久久久国产精品人妻AⅤ蜜臀| 午夜成人无码片在线观看影院| 粉嫩AV精品一区二区三区| 久久久久亚洲精品无码网址| 亚洲AV无码专区国产乱码波多野 | 亚洲精品卡2卡三卡4卡2卡乱码 | 日韩亚洲中字无码一区二区三区 | 乱码专区一卡二卡国色天香| 亚洲热妇无码AV在线播放| 国内精品伊人久久久久影院对白| 无码中文字幕日韩专区视频| 2022国产在线无码精品| 可播放的免费男同GAY| 亚洲一区二区三区AV无码| 丰满少妇人妻久久久久久| 日本精产国品一二三产品区别| JAPANESE五十路熟妇| 欧美熟妇呻吟猛交XX牲| Chinese宅妇内射AV| 欧美成人精品视频在线不卡 | 精品日本久久久久久人妻日本| 日产精品一区二区| 差差差很疼视频30分钟无掩盖| 人与牲动ZZZXXXⅩ0000| 亚洲一区二区三区乱码AⅤ蜜桃女| 国产在线拍偷自揄拍无码| 日本熟妇人妻XXXXX-欢迎您| 被按摩的人妻中文字幕| 日本高清色视频WWW·174| 差差漫画免费页面漫画在线观看| 日本亲与子乱人妻HD| 丁香色欲久久久久久综合网| 蜜芽AV在线新地址| 中文字幕丰满乱子无码视频 | 中国 韩国 日本 免费看片| 韩国三级L中文字幕无码| 亚洲成A人片在线观看无码| 精品无码久久久久国产APP| 亚洲色精品一区二区三AI女星| 久久久久国色AV∨免费看| 中文精品久久久久人妻| 欧美黑人成人www在线观看| 亚洲伊人久久大香线蕉| 久久婷婷色综合老司机| 13学生小美女洗澡裸体视频| 精品人人妻人人澡人人爽人人| 亚洲婷婷五月色香综合缴情| 噜噜狠狠色综合久色AⅤ五区| 99在线精品国自产拍| 日韩成人无码一区二区三区| 国产成人AV无码永久免费| 亚洲AV成人无码精品网站老司机| 精品久久久无码中字| 午夜精品久久久久久久99热| 国外BBOX表演视频| 一区二区精品视频| 精品国产熟女成人AV| 一面亲上边一面膜下边| 欧美成人免费全部观看| 成在线人AV免费无码高潮喷水| 欧美颜射内射中出口爆在线| 性欧美一区二区三区| 久久精品国产亚洲AV麻豆长发 | 日韩欧无码一区二区三区免费不卡 | 人与各种动ZZZ0O0OXXX| 国产成人精品免高潮在线观看| 亚洲VA欧美VA国产VA综合| 国产精品久久久久久久福利| 亚洲AV无码一区二区三区国产| 久久水蜜桃亚洲AV无码精品 | 人妻无码不卡在线视频| 99久久免费国产精品四虎99久久精品免费看国产一区二区 | 国产亚洲AV寡妇| 在线观看4480私人影视| 久久久久无码精品国产AV蜜桃1| 99久久人妻精品免费一区| 天天在线看无码AV片| 国产精品18久久久久久麻辣| 亚洲日本VA一区二区三区| 欧美性猛交XXXX乱大交视频| 国产精品无码DVD在线观看| 无码AV免费一区二区三区| 国产成人精品无码专区| 亚洲午夜久久久久久噜噜噜| 漂亮人妻熟睡中被公侵犯中文版| 国产老妇伦国产熟女老妇高清| 午夜无码一区二区三区在线观看| 国产成人综合色视频精品| 天堂AⅤ无码一区二区三区| 精品久久久久久无码人妻| JAPANESE国产永久| 亚洲AV日韩AV高潮喷无码| 女上男下啪啪激烈高潮无遮盖| 白种女BBWBBWBBW| 色噜噜亚洲精品中文字幕| 国产精品久久久久久久久免费蜜桃 |