形式陈述
设分布族 { P θ : θ ∈ Θ } 对共同支配测度具有密度 p θ ,并给定统计量 T ( X ) 。若对任意 θ 1 > θ 0 ,似然比
p θ 1 ( x ) p θ 0 ( x ) 可以写成 T ( x ) 的非减函数,就称该族对 T 具有单调似然比(MLR) 公理库 单调似然比 Monotone likelihood ratio · MLR property 任意较大参数对较小参数的似然比都随同一统计量单调的分布族结构。 。MLR 并非只说均值随参数变大,而是说所有两点参数比较都沿同一个统计量方向排列证据。
Karlin–Rubin 定理 公理库 Karlin–Rubin 定理 Karlin–Rubin theorem · UMP one-sided test under MLR 具有单调似然比的分布族中,统计量阈值检验对单侧复合备择一致最强。 把这种排序转化为检验最优性。对
H 0 : θ ≤ θ 0 , H 1 : θ > θ 0 , 选择阈值 c 和边界随机化概率 γ ∈ [ 0 , 1 ] ,使
P θ 0 ( T > c ) + γ P θ 0 ( T = c ) = α . 定义检验:T > c 时拒绝,T < c 时不拒绝,T = c 时以概率 γ 拒绝。若正则条件和 MLR 假设成立,该检验是 level-α 的一致最强(UMP)检验。
定义与定理的分工必须保持清楚。MLR 只提供证据排序;UMP 结论还需要显著性水平、复合零假设的 size 控制、边界参数的校准以及Neyman–Pearson 引理 公理库 Neyman–Pearson 引理 Neyman–Pearson lemma 简单零假设对简单备择下,给定显著性约束时似然比阈值检验具有最大功效。 对每个简单备择的最强性。
直觉
对固定 θ 1 > θ 0 ,Neyman–Pearson 引理要求在似然比最大的样本点上拒绝。若每个 θ 1 都产生不同形状的拒绝域,就无法找到同时对整个复合备择最强的单一检验。MLR 的作用正是把这些拒绝域对齐:无论选择哪个更大的参数,似然比都随 T 增加,因此“证据最强的位置”始终是 T 的上尾。
阈值只需在边界 θ 0 下校准。MLR 还带来随机序意义上的单调性,使拒绝概率随 θ 增大而不减;于是复合零假设 θ ≤ θ 0 中,最坏 size 出现在边界。另一方面,对每个固定 θ 1 > θ 0 ,同一个上尾检验又恰好是 Neyman–Pearson 最强检验。两部分合起来,才得到“对所有右侧备择同时最强”。
这幅图景也解释了为什么双侧问题更难。θ > θ 0 希望在 T 大时拒绝,θ < θ 0 希望在 T 小时拒绝;两个方向争夺不同尾部,通常不存在一个对所有双侧备择都最强的检验。
例子与边界
若 S ∼ Binomial ( n , p ) ,则对 p 1 > p 0 ,
P p 1 ( S = s ) P p 0 ( S = s ) = ( p 1 ( 1 − p 0 ) p 0 ( 1 − p 1 ) ) s ( 1 − p 1 1 − p 0 ) n . 第一项的底数大于 1 ,所以似然比随成功次数 s 增加。由此,检验 p ≤ p 0 对 p > p 0 时,应在成功次数足够大时拒绝。离散分布的尾概率通常无法恰好等于 α ,边界随机化正是为了获得精确 level;不随机化版本往往略保守。
已知方差的正态位置族也具有 MLR。若 X 1 , … , X n ∼ N ( μ , σ 2 ) ,统计量 T = X ¯ ,则检验
H 0 : μ ≤ μ 0 , H 1 : μ > μ 0 的 UMP level-α 规则为
X ¯ > μ 0 + z 1 − α σ n . 在 μ 1 > μ 0 下,功效为
1 − Φ ( z 1 − α − n ( μ 1 − μ 0 ) σ ) . 该公式展示的不是某个孤立数值,而是统一阈值怎样覆盖整个单侧备择,以及样本量、噪声和效应大小如何共同推动功效。
一参数自然指数族
p η ( x ) = h ( x ) exp { η T ( x ) − A ( η ) } 通常对 T 具有 MLR,因为两参数似然比是 exp { ( η 1 − η 0 ) T ( x ) } 乘常数。若原参数 θ ↦ η ( θ ) 递减,拒绝方向也随之反转;“大统计量支持大参数”必须按真正的自然参数次序判断,不能机械套用。
边界条件同样重要。参数相关支撑可能使似然比排序失效;nuisance 参数会让边界分布不再唯一;似然比先升后降时,拒绝域不再是单一尾部。双侧问题常转而研究 UMP unbiased、invariant 或其他受限类别中的最优性,限定类必须写进结论。
推论与应用
左侧单尾问题
H 0 : θ ≥ θ 0 , H 1 : θ < θ 0 使用小 T 拒绝,证明与右尾情形对称。检验反演可构造单侧置信界;例如正态均值右尾检验反演后得到下置信界
X ¯ − z 1 − α σ n . 其覆盖性质继承自每个候选参数值下的 level 控制。
MLR 还蕴含一类随机序关系,使许多单调统计量的期望和检验功效随参数同向变化。因此,若声称模型具有 MLR,而数值实验中的功效曲线大幅来回摆动,应优先检查统计量方向、边界随机化、参数化和实现,而不是把异常归因于定理。
学习这条路径时,最自然的顺序是:先理解似然函数与 Neyman–Pearson 引理,再学习 MLR 作为分布族的排序结构,最后由 Karlin–Rubin 定理得到 UMP 检验。这样既保留整体故事,也不会把定义、证明工具和定理结论压成一个模糊标签。
参考资料
Samuel Karlin and Herman Rubin, “The Theory of Decision Procedures for Distributions with Monotone Likelihood Ratio,” Annals of Mathematical Statistics 27(2), 1956.
Erich L. Lehmann and Joseph P. Romano, Testing Statistical Hypotheses , 4th ed., Springer, 2022, Chapter 3.
George Casella and Roger L. Berger, Statistical Inference , 2nd ed., Duxbury, 2002, Section 8.3.
E. L. Lehmann and George Casella, Theory of Point Estimation , 2nd ed., Springer, 1998, discussion of monotone likelihood ratio families.