2026-11-01 更新
分別確認實作、運作與效果
運行自動防禦與頻寬控制時，不僅需要確認預期行為，也需要確認對正常使用者與業務的影響。BASTION分別記錄已經確認的事實與尚未確認的範圍。
本文說明驗證的基本思路，以及截至2026年11月公開介紹的運作範圍。
1. 區分實作、運作與效果 #
功能已經實作、已經部署到環境中、實際運作過，以及獲得有益效果，分別需要不同的確認。僅有測試通過的紀錄，不能保證在所有使用環境中都有效。
應記錄驗證了什麼、在什麼條件下驗證，以及確認到了什麼程度，並明確界定結果可以適用的範圍。如果後續驗證使結論發生變化，也應更新說明。
2. 同時確認對正常業務的影響 #
僅確認能否對攻擊跡象作出回應，還不足以判斷能否用於實際維運。也需要確認是否妨礙正常操作，以及多位使用者共用同一連線來源時，影響是否會擴大。
驗證新方法時，應依變更的影響，選擇隔離環境或僅進行觀測的比較。有限測試通過，並不保證所有操作都不會出現問題。
3. 不將資訊不足的結果視為成功 #
存在觀測缺漏的時段、未能取得結果，或沒有進行比較的機會時，就缺少作出判斷所需的資訊。不能僅憑未記錄到異常，就認定正常或改善成功。
BASTION的改善評估設有將觀測是否充分納入採用判斷的機制。未完成或無法判斷的結果，會與已確認的效果分開保留。
4. 說明比較條件與結論的限制 #
比較不同方法時，應統一對象、條件與所評估的結果，同時確認漏偵測與錯誤回應。應區分使用調整材料進行的檢查，與使用其他材料進行的評估。
僅憑運作紀錄增加或偵測數量變化，無法確定改善的原因。也需要考量是否存在其他解釋；如果未能確認差異，就如實記錄。
5. 目前運作情況與變更範圍 #
截至2026年11月，我們在自有環境中將安全自動防禦與頻寬控制用於正式環境運作。研究中的方法或隔離環境的驗證結果，則與已經用於正式環境的功能分開處理。
自我改善結合預先訂定的授權範圍、檢查、有限套用、觀測與復原來運作。有些處理可在已批准範圍內自動推進，範圍外的變更則另行判斷。參考歷史案例是否能帶來改善效果，仍在驗證中。
6. 依部署環境進行確認 #
自有環境中的運作經驗，並不一定能在其他環境直接得到相同結果。應確認目標業務、可觀測的資訊、允許執行的操作與復原方式，再訂定部署條件。
部署設計、整合與評估將在確認目標範圍和工作內容後個別報價。公開文章說明驗證方針的概要，不刊載內部評估公式、控制條件或客戶資訊。
