“共同的隐藏水平使观测相关,观测噪声只增加各自主对角方差。看到 $Y 1=12$ 后,状态的高斯更新会在先验均值 $10$ 与观测 $12$ 之间加权;具体增益和后验方差由Kalman 滤波器…”
形式陈述 ​
对线性高斯状态空间时间序列模型,设上一步过滤分布为
观测到
若
在高斯假设下,这些量精确给出
直觉
预测先让上一期不确定性随动力学传播,并加上新过程噪声;更新再比较实际观测与预测观测的差
这不是简单固定权重平滑。增益每期可随缺失数据、时变噪声和累计信息改变,矩阵情形还会把一个观测沿状态坐标间的协方差传播。过滤只用现在及过去;使用未来观测改善历史状态叫平滑。把滤波输出称作平滑估计会混淆可用信息集和不确定性。
例子与边界
沿用局部水平模型:
观测
第二期观测
两个更新都可用标量高斯精度加权复算;后验方差下降,但下一次预测会再加过程方差。
若初始
推论与应用
Kalman 滤波把每期计算限制在固定维度的矩阵运算,使很长序列的过滤和高斯似然保持线性时间复杂度。缺失整期观测时可跳过更新、保留预测;部分缺失时删去对应观测行和协方差块。结合 Rauch–Tung–Striebel 向后递推可得到平滑分布,预测误差似然还可置于数值优化或 EM 的外层来估参数;参数估计是利用滤波输出的另一层任务,并非过滤递推本身。
数值实现应避免显式矩阵逆,改用 Cholesky 求解;协方差更新可用 Joseph 形式
或平方根滤波保持对称正半定。理论递推正确不代表模型正确:持续偏置的创新、标准化创新重尾或相关、估计参数漂移都提示错设。应联合报告创新诊断、初始化、噪声协方差和数值稳定策略。
参考资料
- James Durbin and Siem Jan Koopman, Time Series Analysis by State Space Methods, 2nd ed., Oxford University Press, 2012,Chs. 4–5,Kalman filtering, prediction-error decomposition, and initialization。
- Robert H. Shumway and David S. Stoffer, Time Series Analysis and Its Applications, 4th ed., Springer, 2017,§6.2,Kalman filtering and likelihood。
- Brian D. O. Anderson and John B. Moore, Optimal Filtering, Prentice-Hall, 1979,Ch. 3,discrete-time Kalman filter and covariance recursions。