无偏性

🏠 数理统计概念导航

核心问题

有了矩估计和最大似然两把工具,会造出很多不同的估计量。怎么评价它们?

第一把尺子:平均下来对不对。 这就是无偏性。 它是评价估计量的三条标准(无偏、有效、相合)里最容易验证的一条,也是最容易被误解的一条。

核心定义 / 定理 / 结论

一、定义

是的无偏估计对参数空间中每一个都成立 做法只有一个:算,与比

“对每一个 都成立”不是废话——反解常数的题全靠它: 把 展成 的多项式,令各次幂的系数对应相等,得到一组方程。

二、偏差与均方误差

偏差均方误差 无偏均方误差退化为方差

这个分解是连接无偏性与有效性的桥,也是证明相合性的常用工具(均方收敛 依概率收敛)。

三、四条现成的无偏结论(不需要任何分布假设)

只要 、 存在:

就是分母取的全部理由

推导三行:

四、 已知与未知:分母不同

已知:无偏未知:无偏 分母式子里用掉的未知参数个数

五、四条”看起来该无偏、其实不是”

①不是的无偏估计②不无偏③不是的无偏估计④等极值统计量一般不无偏

①的一行证明:。

根源:无偏性穿不过非线性函数

线性函数则一定穿得过: 无偏 是 的无偏估计。 判断题里最省时间的一条。

六、极值统计量的无偏修正

修正因子往上抬支撑型修正因子往下压 在右端偏小;在左端偏大

一般化:若 ,则 等价于 个 的最大值, 。

七、无偏 好

①无偏估计可以有无穷多个泊松:对一切无偏②无偏估计可以取到不可能的值估计会报③无偏估计可以方差极大时无偏但 无偏是入场券,有效性才是排名

典型题型

  1. 验证无偏 —— 算 。
  2. 反解常数使之无偏 —— 令 恒成立,多项式比系数。
  3. 判断哪个是无偏估计(选择题) —— 先看是不是统计量,再看分母,再算期望。
  4. 对极值统计量作无偏修正 —— 先求 ,再取倒数当因子。

图示 / 直觉

重复抽样很多次,把每次算出的画成一个分布:
  • 无偏 = 这个分布的重心恰好落在真值 上;
  • 有效 = 这个分布更窄;
  • 相合 = 增大时这个分布塌缩到 。
无偏说的是重心,不是每次都准

这就是为什么 可以是无偏估计:它每次报 ,从不接近 , 但正负按恰当的频率出现,重心刚好压在 上。

常见误用

  1. 只验一个特殊的 就下结论 —— 必须对所有 成立。
  2. 把 当成 的无偏估计 —— 不是,。
  3. 以为 MLE 一定无偏 —— 正态的 就不是。
  4. 把不变性用到无偏上 —— 无偏没有不变性。
  5. 已知时还用 —— 应为 。
  6. 用含未知参数的式子当估计量 —— 那不是统计量。
  7. 认为”无偏”就是好估计 —— 见第七节三条。

与旧知识的连接

题型训练

链接