Skip to content

定理Theorem

可选停止定理

施工中 · 内容逐步修订

Optional stopping theorem · Optional sampling theorem

在足以控制随机停止与极限交换的条件下,鞅的期望在停时前后保持不变。

形式陈述 ​

设 (Mn,Fn)n≥0 是离散时间鞅,τ 是停时。首先,对每个确定的 N,停止过程 (Mn∧τ) 仍是鞅,因此

E[MN∧τ]=E[M0].

若 τ≤N 几乎处处,则 MN∧τ=Mτ,立即得到

E[Mτ]=E[M0].

有界停止的论证也适用于上鞅与下鞅:上鞅给出 EMτ≤EM0,下鞅给出反向不等式。具体地,停止过程的第 k 个增量为 1{τ≥k}(Mk−Mk−1);指标在 Fk−1 中可测,故保留原增量的条件均值方向。有限项求和便得到有界停时结论。

无界停时需要额外控制。一组常用充分条件是停止族 {Mn∧τ:n≥0} 一致可积且 τ<∞ 几乎处处;此时 Mn∧τ→Mτ 几乎处处,鞅的 L¹ 收敛定理进一步给出均值收敛,从而可把极限移入期望。另一种离散版本假设存在常数 C 使 |Mn−Mn−1|≤C 几乎处处,同时 Eτ<∞,也可推出上述结论。后一组条件给出可积的支配量 |Mn∧τ|≤|M0|+Cτ,因此也能通过控制收敛定理交换极限与期望。

直觉

在每个确定时刻,鞅的下一步增量在当前信息下平均为零。停时根据已经看到的路径决定是否继续,因此截断在有限时间内的停止规则仍保留这一条件均值关系。

无限等待涉及另一层问题:停止后的数值逐条路径收敛时,其平均值是否也收敛。一致可积性限制小概率事件上残留的巨大贡献,让有限阶段的期望等式传到极限。下面的两个随机游走例子分别展示了尾部受控和尾部贡献持续存在的情况。

例子与边界

对从 S0=0 出发的对称随机游走 Sn,令 τ 为首次到达 −a 或 b 的时刻,其中 a,b 为正整数。停止前后状态被限制在有限区间,且停时几乎处处有限;对截断停时应用定理并控制极限可得

0=ESτ=−aP(Sτ=−a)+bP(Sτ=b),

从而 P(Sτ=b)=a/(a+b)。对应的下边界命中概率为 b/(a+b);距离与命中概率通过期望恒等式联系起来。

若只在首次到达 1 时停止,即 τ=inf{n≥0:Sn=1},则 τ<∞ 几乎处处且 Sτ=1,而每个截断值仍满足 E[Sn∧τ]=0。此时正部恰为 1{τ≤n},所以

E[(Sn∧τ)−]=E[(Sn∧τ)+]=P(τ≤n)⟶1.

负部逐条路径趋于零,期望却趋于 1:越来越少的未命中路径承担越来越大的负值。这直接说明停止族不一致可积,也解释了为何极限期望变成了 1。该停时的期望为无穷。

推论与应用

SR运行长度下界提供一个只需有界停止的例子。正确正常模型下Rn−r−n是鞅;在阈值停时τ截断于N后,r+E(τ∧N)=ERτ∧N≥AP(τ≤N)。若τ=∞有正概率,其扩展均值已为无穷;否则让N增大得到Eτ≥A−r。这不要求先声称ERτ=r+Eτ,因此不会把待证的尾部控制偷偷放进一般下界。

鞅给出条件公平性,停时确保规则不读取未来,可选停止定理再补上尾部控制。三者结合可计算随机游走命中概率、期望访问次数和序贯检验的错误率,也能证明某些随机算法在自适应停止下仍保持无偏。

双边命中问题还可算出等待时间。对鞅 Sn2−n 在 τ∧N 停止,有 E[τ∧N]=E[Sτ∧N2]≤max(a,b)2。单调收敛定理先给出 Eτ<∞,再利用停止位置有界令 N→∞,得到

Eτ=E[Sτ2]=a2ba+b+b2aa+b=ab.

同一边界条件因此同时确定了命中概率与平均等待时间。

参考资料
关系图谱17 个相邻概念 · 2 类关系

拖动节点调整位置。

显示关系

显示:依赖

  1. 前置三跳
  2. 前置二跳
  3. 前置一跳
  4. 当前条目
  5. 后续一跳
  6. 后续二跳
  7. 后续三跳
文字版关系按与当前条目的最短距离分组
类型化关系