如何安全採用 DuckDB 1.4 資料庫檔案加密？
題目與場景
團隊用 DuckDB 檔案承載離線分析和客戶匯出的敏感資料，準備升級到 1.4 LTS 並啟用資料庫檔案加密。請說明加密覆蓋範圍、ATTACH 設定、金鑰生命週期、舊檔案遷移、備份復原和效能驗證；同時說明為什麼「加密了主檔案」仍可能留下洩露路徑。
面試官考察什麼
- 能否區分資料庫檔案、WAL、暫存檔、備份和匯出檔案的保護邊界。
- 能否正確使用 DuckDB 的
ENCRYPTIONKEY、ENCRYPTIONCIPHER與 storage version 約束。 - 能否設計不把金鑰寫入 SQL、日誌或映像檔的金鑰管理方案。
- 能否透過遷移、復原演練和基準測試證明安全性與可用性。
澄清問題
- 資料庫檔案是否會上傳到物件儲存、複製到分析節點或放入暫存目錄？
- 需要保護的是靜態檔案，還要防止運行程序和授權使用者讀取明文嗎？
- 目前 DuckDB 版本、用戶端語言和備份工具是否都支援 1.4 storage version？
- 業務能接受金鑰輪換時重寫整個資料庫檔案嗎？復原目標和停機視窗是多少？
30 秒回答
DuckDB 1.4 的資料庫加密預設使用 256 位元 AES-GCM，並覆蓋主資料庫、WAL 和暫存檔；它要求 storage version 1.4 或更高。我會讓金鑰由外部 KMS 或 secret manager 在執行時注入，只傳給短生命週期程序，不寫入 SQL、命令列和日誌。先複製檔案做離線遷移和復原演練，再用 ATTACH ... (ENCRYPTION_KEY ...) 建立加密副本，驗證讀寫、備份和舊用戶端失敗行為。基準測試比較加密開關、httpfs OpenSSL 加速和並發情境，發現風險或效能不達標時保留未加密來源檔案的嚴格存取控制並回退版本。
深入拆解
1. 明確保護邊界
官方文件說明加密覆蓋主資料庫檔案、WAL 和暫存檔，但不會自動保護匯出的 Parquet、日誌、快取副本或記憶體中的明文。先畫出檔案生命週期和複製路徑，再定義靜態加密、程序權限和備份存取的控制目標。
2. 選擇 cipher 與 storage version
預設 GCM 提供認證加密；CBC 和 CTR 可設定，但要評估完整性保護和相容要求。資料庫加密意味著 storage version 至少為 1.4，舊 DuckDB 版本可能無法開啟檔案。把版本檢查放進啟動和復原腳本，避免升級後才發現不可讀。
3. 管理金鑰而非字串
金鑰來自 KMS、secret manager 或短期工作負載身分，注入記憶體或受保護檔案描述元。禁止把 ENCRYPTION_KEY 寫入倉庫、容器層、shell 歷史、SQL 日誌和錯誤追蹤。輪換通常需要以新金鑰重寫資料庫，再原子替換並保留受控回滾副本。
4. 遷移與備份復原
先對來源檔案做校驗和和唯讀快照，使用受控工作建立加密副本，逐表比較行數、統計和關鍵查詢結果。備份要驗證加密檔案、金鑰版本和復原順序；只備份主檔案而遺漏 WAL 或暫存匯出，會造成復原失敗或洩露。
5. 驗證效能與維運故障
分別測試冷快取掃描、寫入、WAL 峰值、暫存溢寫和並發讀取。載入 httpfs 可使用 OpenSSL 實現更快的加密路徑，但要在目標平台驗證。演練錯誤金鑰、缺少金鑰、舊用戶端、磁碟滿和 KMS 不可用，確保錯誤可觀測且不會靜默降級為明文。
高品質示範答案
我會把 DuckDB 檔案當作一個有生命週期的敏感資產。先盤點主檔案、WAL、暫存目錄、備份、匯出和物件儲存複製路徑；再用 1.4 LTS 的預設 AES-256-GCM 建立加密副本，並明確 storage version 相容邊界。金鑰由 KMS 在執行時提供，永不進入 SQL、映像檔、日誌或命令列；輪換透過新金鑰重寫、校驗、原子替換和保留受控回滾副本完成。上線前做逐表校驗、復原演練和冷/熱快取基準，特別測量 WAL 與暫存檔。若 KMS、舊用戶端或效能門檻不滿足，停止推廣並回退到嚴格權限控制的舊版本，同時記錄風險和下一次驗證條件。
常見錯誤
- 只加密主檔案，忽略 WAL、暫存檔、備份和匯出。
- 把金鑰硬編碼在 SQL、環境映像、shell 歷史或日誌中。
- 忽略 storage version 1.4 的相容約束，導致舊用戶端無法復原。
- 宣稱 GCM、CBC、CTR 在安全性和效能上完全等價。
- 沒有測試錯誤金鑰、KMS 中斷、磁碟滿和復原順序。
- 只測平均查詢時間，未測冷快取、暫存溢寫和並發讀寫。
追問與回答
加密後仍有洩露風險嗎？
有。匯出的檔案、日誌、快取、記憶體和能讀取金鑰的程序仍可能暴露明文。必須把檔案生命週期、程序權限、備份存取和金鑰稽核一起納入威脅模型。
如何輪換資料庫金鑰？
在隔離目錄用新金鑰重寫副本，完成校驗和復原演練後原子替換；舊金鑰只保留到回滾視窗結束，再由 KMS 撤銷並稽核使用紀錄。
為什麼要載入 httpfs？
DuckDB 文件指出，OpenSSL 路徑通常能利用硬體加速，效能優於內建 mbedtls。是否載入仍要以目標平台基準為準，不能把擴充功能存在當成效能保證。