百科问答小站 logo
百科问答小站 font logo



什么是无偏估计? 第1页

  

user avatar   matongxue 网友的相关建议: 
      

现实中常常有这样的问题,比如,想知道全体女性的身高均值 ,但是没有办法把每个女性都进行测量,只有抽样一些女性来估计全体女性的身高:

那么根据抽样数据怎么进行推断?什么样的推断方法可以称为“好”?

1 无偏性

比如说我们采样到的女性身高分别为:

那么:

是对 不错的一个估计,为什么?因为它是无偏估计。

首先,真正的全体女性的身高均值 ,我们是不知道,只有上帝才知道,在图中就画为虚线:

我们通过采样计算出 :

会发现,不同采样得到的 是围绕 左右波动的:

这有点像打靶,只要命中在靶心周围,还算不错的成绩,这就是无偏的:

如果用以下式子去估计总体方差 :

根据“为什么样本方差的分母是 n-1?”的解释,会偏离靶心、产生偏差,这就是有偏的:


这个偏差经过计算,就是:

这种偏差就好像瞄准镜歪了,是系统性的:

就此而言,无偏估计要好于有偏估计。

2 有效性

打靶的时候,右边的成绩肯定更优秀:

进行估计的时候也是,估计量越靠近目标,效果越“好”。这个“靠近”可以用方差来衡量。

比如,仍然对 进行估计,方差越小,估计量的分布越接近 :

有效估计和无偏估计是不相关的:

举个例子,从 中抽出10个样本:

下面两个都是无偏估计量:

但是后者比前者方差小,后者更有效。

并且在现实中不一定非要选无偏估计量,比如:

如果能接受点误差,我倒觉得选择右边这个估计量更好。

3 一致性

之前说了,如果用以下式子去估计方差 :

会有一个偏差:

可以看到,随着采样个数 的增加,这个偏差会越来越小。那么这个估计就是“一致”的。

如果样本数够多,其实这种“有偏”但是“一致”的估计量也是可以选的。

4 总结

判断一个估计量“好坏”,至少可以从以下三个方面来考虑:

  • 无偏
  • 有效
  • 一致

实际操作中,要找到满足三个方面的量有时候并不容易,可以根据情况进行取舍。

文章最新版本在(有可能会有后续更新):如何理解无偏估计?




  

相关话题

  如何通俗易懂地介绍 Gaussian Process? 
  谈谈决策模型方法与统计实证方法的异同? 
  如何正确地理解统计学上的相关性,关联性及差异性比较,方差分析,回归? 
  百度百科「幸存者偏差」中关于二战飞机的例子,前后解释有些矛盾,是怎么回事? 
  英国统计学硕士申请? 
  如何申请ANU的by research的offer,且如何陶瓷导师? 
  如何理解马氏距离,多维Mahalanobis距离是否要用到“互相关张量”来进行描述? 
  在本科数学阶段你学过最有趣的一门数学课是什么?为什么? 
  因素分析、熵值法的用法区别是什么? 
  R语言,累计求和号连续几个∑∑∑∑这样的怎么编码? 

前一个讨论
熵权法可以有空值吗?
下一个讨论
偏序集与完备格?





© 2025-01-31 - tinynew.org. All Rights Reserved.
© 2025-01-31 - tinynew.org. 保留所有权利