“其中 $V t\in\mathcal H { \infty}$ 是完全可预测的平稳部分;$(\varepsilon t)$ 是方差 $\sigma \varepsilon^2$ 的白噪声过程…”
形式陈述 ​
白噪声
的随机过程,记作
有些教材把非零常均值也称白噪声,写成
还应区分两种“创新”。线性预测创新是相对于过去随机变量闭线性张成空间的投影残差,只保证与线性过去正交。相对于信息滤过
直觉
“白”借自光谱:所有频率上功率相同,因为除零滞后外协方差全为零。它表示线性二阶意义下没有可从过去提取的方向性信号,而不是每个样本都细小、频繁或服从钟形分布。方差
在时间序列模型中,白噪声通常充当每期新到达的冲击。AR、MA 与状态空间模型把这些冲击通过确定性线性结构传播,产生可预测相关。若残差仍有显著自相关,说明线性均值结构尚未吸收;若残差本身无相关但平方残差有相关,则可能是条件方差动态,而非均值模型已经完整正确。
例子与边界
独立 Rademacher 变量
则
更大滞后同样因某个独立零均值因子而为零,所以它是白噪声。然而
而两个边缘二阶矩乘积为
要看到后一层差别,令独立标准正态
若
推论与应用
白噪声是移动平均过程与自回归过程的输入,也是ARMA 过程的线性冲击。对纯非确定弱平稳过程,Wold 分解定理给出一列与过去正交的创新白噪声;在 Wold 系数归一化为首项
残差诊断应同时检查时序相关、分布与方差稳定性。端口检验未拒绝白噪声零假设只表示在选定滞后与样本量下缺乏线性相关证据,不证明独立或模型正确。预测中,Wold 创新的最佳线性预测为零,其无条件方差是一步线性预测误差方差。若进一步是相对于全部当前信息的条件均值创新,则平方损失下的最佳预测也为零;但条件方差可以随过去变化,不能仅凭白噪声把每个时点的条件误差方差都定为
参考资料
-
Peter J. Brockwell and Richard A. Davis, Introduction to Time Series and Forecasting, 3rd ed., Springer, 2016,Example 1.4.2 and §2.2,white noise and stationary linear processes。
-
James D. Hamilton, Time Series Analysis, Princeton University Press, 1994,§3.2,white noise innovations in stationary ARMA models。
-
Robert H. Shumway and David S. Stoffer, Time Series Analysis and Its Applications, 4th ed., Springer, 2017,§1.4 and Ch. 3,white noise and residual diagnostics。
-
Rob J. Hyndman and George Athanasopoulos, Forecasting: Principles and Practice, 3rd ed., OTexts, 2021,§2.8,自相关:相关函数的二阶含义;本文另直接验算不相关但非独立、以及非线性可预测的反例。