題目與使用場景
本題聚焦事前定義的更新規則：面試官要判斷你是否把觀點視為可證偽的假設，並能說明什麼訊號只觸發調查、什麼訊號足以改變行動。
面試官考察什麼
- 是否說明原判斷的目標、依據與不確定性。
- 是否定義哪些證據會改變結論。
- 是否區分新事實、雜訊與事後解釋。
- 是否及時讓決策者與執行團隊看見變化。
- 改方向後是否保留安全邊界、回滾方案與結果指標。
- 是否把一次更新沉澱成流程或判斷習慣。
作答前的釐清問題
- 當時要做的決定與代價是什麼？
- 最初依賴哪些資料、使用者訊號或實驗？
- 新證據來自哪裡，可信度如何驗證？
- 是否預先設定更新門檻？
- 誰負責最後決定，時間窗口多長？
- 新方案如何驗證，失敗時如何回退？
30 秒回答框架
「我當時根據[依據]支持[方案]，並明確[風險與會改變判斷的訊號]。後來[新證據]透過[驗證方法]顯示原假設不成立，我把變化、影響與替代方案同步給[決策者]，建議先用[小範圍試驗或回滾邊界]驗證。團隊改用[新方案]後，[指標]達到[結果]，我再把[具體檢查或門檻]加入流程。」
分步驟深入解答
步驟 1：定義原假設。 說清目標、限制、證據與信心程度，避免把偏好偽裝成事實。
步驟 2：設定更新規則。 先說明樣本量、錯誤率、使用者回饋或成本變化達到何種程度會觸發複核。
步驟 3：核驗新證據。 檢查來源、對照組、時間窗口與替代解釋；單一異常不自動等於趨勢。
步驟 4：公開更新。 用一頁決策紀錄寫出原結論、新證據、影響與建議，通知決策者及受影響團隊。
步驟 5：控制變更風險。 先做小流量、可回滾的試驗，保留停止門檻與負責人。
步驟 6：驗證結果。 比較預設指標、護欄指標與使用者影響，記錄哪些預測成立。
步驟 7：沉澱學習。 更新監控、評審清單或實驗設計，說明下一次會更早檢查什麼。
高品質示範回答
「我們原本計畫把匯入流程改成一次性批次處理，因為歷史資料看起來能降低請求數。我檢查最近客戶的失敗日誌，發現大檔案逾時集中在網路較慢的租戶；按租戶分層後，原樣本並不代表這群使用者。我把證據與 5% 租戶的分批方案寫進決策紀錄，建議以失敗率和完成時間作為停止門檻。負責人同意先做小範圍試驗，結果失敗率下降且總完成時間沒有惡化，於是擴大範圍。我把網路分層加入壓測清單，也在評審時先檢查樣本代表性。」
常見錯誤
- 只說「我承認錯誤」→ 缺少判斷過程 → 說明原假設與證據門檻。
- 把單一異常當趨勢 → 更新缺乏可信度 → 檢查樣本、對照與替代解釋。
- 悄悄改方案 → 團隊仍按舊結論執行 → 同步決策紀錄、影響與下一步。
- 改方向卻沒有護欄 → 風險不可控 → 先小範圍試驗並設回滾條件。
- 只講最後成功 → 無法判斷方法 → 同時報告護欄指標與失敗訊號。
追問及應對
追問 1：如果證據互相矛盾？
標註衝突，檢查定義、樣本與時間窗口；無法判定時縮小試驗範圍，不要選擇最支持自己的數字。
追問 2：如何避免顯得沒有主見？
先給出根據當前證據的明確建議，再說明會觸發更新的條件。可更新不等於沒有立場。
追問 3：誰不同意你的更新？
把爭論轉成可驗證的預測，邀請對方指出反證，約定負責人、指標與複核時間。
追問 4：新證據出現時已經來不及重做？
先保護使用者與系統，啟用回滾或停止門檻；之後記錄影響，再安排最小驗證與正式複盤。
追問 5：你怎樣判斷這次改變真的有效？
使用事先定義的結果指標與護欄指標，與基線或對照比較，並說明剩餘不確定性。
追問 6：如果新證據證明你原來是對的？
保留原方案並記錄驗證過程；目標是提升決策品質，不是為改變而改變。
追問 7：這件事改變你的工作方式嗎？
說出一項可觀察的流程變化，例如在決策紀錄加入反證、樣本代表性與複核日期。