概述
正確的時間戳對齊、滾動視窗邊界和按時間排序的驗證對於防止未來資訊洩漏到訓練特徵中至關重要。
深入探討
當每個訓練行代表一個預測原點且其特徵包含該原點可用的資訊時,表格模型可以預測時間序列。滯後特徵是偏移值,例如 y_(t-1)、y_(t-7) 或 y_(t-24)。它們提供最近的歷史和季節性重複作為未來目標 y_t 或 y_(t+h) 的預測因子。滾動統計總結了過去值的窗口,而日曆功能則對已知的計時模式進行編碼。一致性是主要風險。若要預測時間 t 的 y_t,要素不得包含 y_t 或更高版本的值。如果目標是 y_t,則 7 天滾動平均值必須在 t-1 結束。一個常見的錯誤是在移動之前計算滾動平均值,其中包括目標觀測值。另一個是隨機訓練測試分割,未來的行可以訓練在早期評估的模型,並且重疊的視窗共享幾乎相同的資訊。考慮假設的每週需求預測。特徵可能包括一周前、四周前的需求、追蹤四周平均值、工作日和計劃假期指標。應追蹤每個值的可用性:假期日曆是已知的,而除非使用天氣預報,否則可能不知道實際天氣。某個功能可能在歷史上是相關的,但在決策時不可用。使用按時間排序的驗證,例如滾動或擴展窗口,並與使用的預測範圍相符。當標籤到達延遲或特徵跨度與測試視窗重疊時,可能需要間隙。僅在每個訓練折疊內安裝縮放器和輸入器。對於多步驟預測,決定是使用先前的預測進行遞歸預測,直接預測每個範圍,還是使用具有未來已知協變量的策略。根據簡單的季節性基準進行評估並監控績效如何隨時間變化。滯後特徵學習提供了靈活的非線性預測,但其可靠性取決於嚴格的資訊計時和序列過程的穩定性。
現實世界的實施
為了預測 t 天的需求,模型使用 t-1 和 t-7 的需求作為滯後特徵。目標是 t 時的需求,因此在發布預測之前兩個輸入都必須可用。
t 時的預測的滾動 7 天平均值應使用 t-1 期間的值。包含目標日的實際值會將答案洩漏到功能中。
諸如工作日或月份之類的日曆特徵可以提前知道,而實際天氣或促銷只有在其預測或計劃在預測時間可用的情況下才是有效的輸入。
团队评估滚动源预测,并在延迟标签或重叠窗口时插入间隙,否则可能会让训练包含太接近测试周期的信息。
時間序列預測滯後特徵的未來
滞后特征系统可以通过存储每个预测源以及当时可用的精确特征快照来改进。这可以实现真实的回测,并有助于调查性能意外后的泄漏。團隊應監控功能新鮮度、延遲標籤和特定範圍的錯誤,然後在有用時比較直接策略和遞歸策略。日历和计划的事件数据需要它们自己的可用性时间戳。當新的協變數可用時,僅使用歷史上存在的資訊來驗證它們的貢獻。稳健的预测不仅取决于模型选择,还取决于数据时序和流程设计。
付諸實踐
為什麼這很重要
- 成本與預算. 多年來,架構決策決定著效能和營運成本。
- 更明確的決策. 技術教育幫助團隊選擇正確的堆疊,而不僅僅是最新的堆疊。
- 品質管控. 更好的工程選擇可以減少生產中的可靠性事故。
留意
- 優化一項基準測試可以隱藏更廣泛的系統弱點。
- 基礎設施和維護成本常常被低估。
- 隨著系統變得更加複雜,安全性和可觀察性差距可能會擴大。
後續步驟
- 在實施之前定義延遲、品質和成本目標。
- 在實際負載和資料條件下進行基準測試。
- 儀器監控錯誤、漂移和使用者影響。
- 在擴展之前準備回滾和事件回應路徑。
不斷探索
常見問題
什麼是時間序列預測的滯後特徵?
滯後特徵透過將過去的觀察結果和其他預測時已知的輸入與未來目標配對,將預測轉變為監督學習。正確的時間戳對齊、滾動視窗邊界和按時間排序的驗證對於防止未來資訊洩漏到訓練特徵中至關重要。
要在時間 t 前預測 y_t,哪個滯後特徵在時間上有效?
先前的觀測值在目標時間之前可用,而同期目標值和未來值則不可用。
在預測第二天的價值時,尾隨 7 天平均值應該在哪裡結束?
此視窗必須僅使用目標之前可用的資訊以避免洩漏。
為什麼隨機分割會給出不切實際的時間序列評估?
隨機分割可以顛倒時間順序,讓未來的訊息影響早期的測試。
規劃假期指標何時是有效的預測功能?
如果某個要素的值在預測來源(例如已知的日曆日期)處可用,則該要素有效。
為什麼驗證拆分可能包含間隙?
間隙可以減少標籤延遲或訓練測試邊界附近重疊的視窗造成的洩漏。