Skip to content

单调似然比与 UMP 检验:从证据排序到统一最优性

检索别名:Monotone likelihood ratio and UMP tests · MLR-to-UMP overview

综合说明 MLR 如何把简单假设的似然比排序提升为单侧复合假设的 Karlin–Rubin UMP 结论。

领域
统计学
条目类型
导航

形式陈述

设分布族 {Pθ:θΘ} 对共同支配测度具有密度 pθ,并给定统计量 T(X)。若对任意 θ1>θ0,似然比

pθ1(x)pθ0(x)

可以写成 T(x) 的非减函数,就称该族对 T 具有单调似然比(MLR)。MLR 并非只说均值随参数变大,而是说所有两点参数比较都沿同一个统计量方向排列证据。

Karlin–Rubin 定理把这种排序转化为检验最优性。对

H0:θθ0,H1:θ>θ0,

选择阈值 c 和边界随机化概率 γ[0,1],使

Pθ0(T>c)+γPθ0(T=c)=α.

定义检验:T>c 时拒绝,T<c 时不拒绝,T=c 时以概率 γ 拒绝。若正则条件和 MLR 假设成立,该检验是 level-α 的一致最强(UMP)检验。

定义与定理的分工必须保持清楚。MLR 只提供证据排序;UMP 结论还需要显著性水平、复合零假设的 size 控制、边界参数的校准以及Neyman–Pearson 引理对每个简单备择的最强性。

直觉

对固定 θ1>θ0,Neyman–Pearson 引理要求在似然比最大的样本点上拒绝。若每个 θ1 都产生不同形状的拒绝域,就无法找到同时对整个复合备择最强的单一检验。MLR 的作用正是把这些拒绝域对齐:无论选择哪个更大的参数,似然比都随 T 增加,因此“证据最强的位置”始终是 T 的上尾。

阈值只需在边界 θ0 下校准。MLR 还带来随机序意义上的单调性,使拒绝概率随 θ 增大而不减;于是复合零假设 θθ0 中,最坏 size 出现在边界。另一方面,对每个固定 θ1>θ0,同一个上尾检验又恰好是 Neyman–Pearson 最强检验。两部分合起来,才得到“对所有右侧备择同时最强”。

这幅图景也解释了为什么双侧问题更难。θ>θ0 希望在 T 大时拒绝,θ<θ0 希望在 T 小时拒绝;两个方向争夺不同尾部,通常不存在一个对所有双侧备择都最强的检验。

例子与边界

SBinomial(n,p),则对 p1>p0

Pp1(S=s)Pp0(S=s)=(p1(1p0)p0(1p1))s(1p11p0)n.

第一项的底数大于 1,所以似然比随成功次数 s 增加。由此,检验 pp0p>p0 时,应在成功次数足够大时拒绝。离散分布的尾概率通常无法恰好等于 α,边界随机化正是为了获得精确 level;不随机化版本往往略保守。

已知方差的正态位置族也具有 MLR。若 X1,,XnN(μ,σ2),统计量 T=X¯,则检验

H0:μμ0,H1:μ>μ0

的 UMP level-α 规则为

X¯>μ0+z1ασn.

μ1>μ0 下,功效为

1Φ(z1αn(μ1μ0)σ).

该公式展示的不是某个孤立数值,而是统一阈值怎样覆盖整个单侧备择,以及样本量、噪声和效应大小如何共同推动功效。

一参数自然指数族

pη(x)=h(x)exp{ηT(x)A(η)}

通常对 T 具有 MLR,因为两参数似然比是 exp{(η1η0)T(x)} 乘常数。若原参数 θη(θ) 递减,拒绝方向也随之反转;“大统计量支持大参数”必须按真正的自然参数次序判断,不能机械套用。

边界条件同样重要。参数相关支撑可能使似然比排序失效;nuisance 参数会让边界分布不再唯一;似然比先升后降时,拒绝域不再是单一尾部。双侧问题常转而研究 UMP unbiased、invariant 或其他受限类别中的最优性,限定类必须写进结论。

推论与应用

左侧单尾问题

H0:θθ0,H1:θ<θ0

使用小 T 拒绝,证明与右尾情形对称。检验反演可构造单侧置信界;例如正态均值右尾检验反演后得到下置信界

X¯z1ασn.

其覆盖性质继承自每个候选参数值下的 level 控制。

MLR 还蕴含一类随机序关系,使许多单调统计量的期望和检验功效随参数同向变化。因此,若声称模型具有 MLR,而数值实验中的功效曲线大幅来回摆动,应优先检查统计量方向、边界随机化、参数化和实现,而不是把异常归因于定理。

学习这条路径时,最自然的顺序是:先理解似然函数与 Neyman–Pearson 引理,再学习 MLR 作为分布族的排序结构,最后由 Karlin–Rubin 定理得到 UMP 检验。这样既保留整体故事,也不会把定义、证明工具和定理结论压成一个模糊标签。

参考资料
  • Samuel Karlin and Herman Rubin, “The Theory of Decision Procedures for Distributions with Monotone Likelihood Ratio,” Annals of Mathematical Statistics 27(2), 1956.
  • Erich L. Lehmann and Joseph P. Romano, Testing Statistical Hypotheses, 4th ed., Springer, 2022, Chapter 3.
  • George Casella and Roger L. Berger, Statistical Inference, 2nd ed., Duxbury, 2002, Section 8.3.
  • E. L. Lehmann and George Casella, Theory of Point Estimation, 2nd ed., Springer, 1998, discussion of monotone likelihood ratio families.
术语导航仅作分流

沿正文链接进入正式概念页;本页不参与六类关系。