題幹與適用場景
這是產品執行與指標分析題。發布後每位使用者收入上升，同時某個留存指標下降。不要假設因果、客戶價值相等，或任何一個指標就是公司目標。回答應先定義決策人群、診斷窗口、護欄和行動規則，再提出是否繼續發布。
面試官考察點
面試官希望看到先診斷再表態。Interview Pilot 將成功指標、優先級和指標變化診斷列為 PM 執行面試重點，也提醒不要選虛榮指標或跳過診斷直接修復。強回答會區分觀察與因果證據、拆分人群，說明長期結果和回滾標準。弱回答只說「留存更重要」，卻不說明商業模式或付費人群。
回答前需要釐清的問題
- 收入指流水、確認收入、利潤，還是每位活躍使用者收入？定義不同，取捨也不同。
- 哪個留存隊列和時間跨度變化：第 7 天、首月、續約還是客戶留存？短期訊號不能取代續約訊號。
- 哪些使用者看到了發布，曝光是否隨機？方案、地區、裝置、使用年限和來源都可能造成組成變化。
- 決策期限和回滾成本是什麼？可逆開關與永久價格遷移需要不同閾值。
- 哪些護欄不可突破：退款、客訴、客服量、延遲或合規限制？
30 秒回答框架
「我先核對指標定義、曝光、隊列和時間窗口，再判斷收入增長與留存下降是否有因果關係，以及是否集中在某個人群。我會定義公司要優化的長期目標和不可接受的護欄，把發布保留在可逆控制下。決策規則會預先寫清繼續、縮小人群、改變體驗或回滾的條件。」
分步診斷與決策
1. 驗證變化真實存在
檢查埋點、曝光分配、分母、退款、季節性和隊列成熟度；可能時與對照組比較。每位使用者收入上升可能只是低價值使用者流失造成的組成變化，並不等於變現變好。
2. 拆分衝突發生在哪裡
按方案、使用年限、獲客來源、地區、裝置和功能曝光拆分。對每組比較收入、留存、毛利、客服聯絡、退款和使用品質。若高階方案續約穩定而新使用者流失明顯，可能應定向調整，而非全量回滾。
3. 選擇主要指標與護欄
先說清長期目標，例如續約週期內的貢獻毛利；把留存、退款率、客訴率和服務品質作為不可接受傷害的護欄。Statsig 區分直接衡量目標的主要指標與發現副作用的次要指標；Amplitude 文件也將成功指標與護欄閾值分開。護欄過多會讓任何決策都無法通過。
4. 使用可逆決策規則
保留對照組或功能開關，讓證據繼續成熟。主要目標超過最小效果且沒有護欄越界時繼續；傷害只發生在一組使用者時縮小發布；找到機制後修改定價、引導或價值表達；關鍵護欄越界或長期價值明確為負時回滾。先寫規則，再查看下一批資料。
高品質示範回答
「我不會憑直覺選擇收入或留存。先確認每位使用者收入和留存使用相同的合格人群，並確認發布曝光是隨機的。按方案和使用年限檢查隊列，再比較續約意願、退款、客訴和貢獻毛利。假設高階方案毛利上升且續約不變，但新的免費使用者在付費牆變更後第 30 天留存明顯下降，我會保留高階方案版本，縮小新使用者的付費牆實驗，並把續約和退款率作為護欄。發布繼續放在開關後並保留對照組。只有毛利達到最小效果、護欄不越界才繼續，否則回退付費牆並測試干擾更小的價值說明。關鍵是預先寫好的、按人群區分的規則，而不是為最先變化的指標辯護。」
常見錯誤
- 只看一張總圖宣布勝負 → 組成變化和隊列成熟度可能反轉結論 → 先核對分母並拆分人群。
- 認為留存永遠優先 → 商業模式和時間跨度不同 → 定義長期目標與客戶價值。
- 把所有次要指標都當同等目標 → 決策規則會癱瘓 → 只保留重要且可行動的護欄。
- 因為早期噪聲停止實驗 → 反覆窺看會增加錯誤決策 → 預先定義時長、閾值和僅用於緊急事故的檢查。
- 一個人群受損就全量回滾 → 丟掉未受影響人群的價值 → 局部控制並驗證具體機制。
- 忽視毛利與退款 → 收入增長可能伴隨經濟性惡化 → 納入貢獻和售後成本。
追問及應對
如果所有人群收入都漲、留存都降呢？
重新檢查歸因和時間跨度，再用明確不確定性的長期價值估計。若長期價值為負或關鍵護欄越界，就暫停或回滾，同時測試更少榨取感的設計；不要把損失藏在總預測裡。
留存很吵、面試時間又短怎麼辦？
只有在已驗證與長期結果相關時才使用代理指標。分階段回答：立即補齊埋點，監控領先護欄，等隊列成熟後再作全量決定。明確不確定性，不編造精確閾值。
如何向領導層溝通決定？
用一頁展示目標、分群表、不確定性和決策規則，說明已知、未知、受影響人群以及護欄變化時的動作。這樣討論會圍繞目標展開，而不是爭論一張圖。