加载中
加载中
表情图片
评为精选
鼓励
加载中...
分享
加载中...
文件下载
加载中...
修改排序
加载中...
论方差估计公式中为什么是n-1
iamapighhh2018/04/14数学 IP:山东
按:前几天在一个帖子https://www.kechuang.org/t/82733讨论中提到了这个问题,虎哥建议我单独开一个贴,于是我就把前几天写的粘在这里吧。

我们在《大学物理实验》中使用的,用于估计多次重复测量同一物理量的标准差计算公式如下:
σ=i=1n(XiX¯)2n1
而这与高中学习过的方差的计算公式:
σ2=i=1n(XiX¯)2n
略有不同。这是为什么?我试着把这个问题说清楚。下面的计算只使用了本科水平的概率论知识。

使用某物理仪器对同一物理量重复测量n次,此时每次测量结果视为n个独立同分布的随机变量,记为X1,X2.....Xn,或者更数学化地{Xi}1in. 同时我们假设这些随机变量都符合均值μ,方差σ2的随机分布D(μ,σ2),且存在概率密度分布函数f(之所以这样说,是因为某些分布方差可以不存在,某些分布可以没有常规意义上的分布函数)。 此时我们为了从{Xi}1in获取方差的估计值σ^2,需要选取一个估计函数 (estimator),此函数接受n个测量值{Xi}1in作为自变量, 输出方差的估计值, 即:est:RnR {Xi}1inσ^2
很显然这样的函数有无数种选取方式, 对应无数种不同的估计方差的方式。而由于{Xi}1in是一族随机变量,则est({Xi}1in)=σ^2也是一个随机变量。

由于估计函数选取的任意性,我们需要一定的标准来判断估计的好与坏。为此,统计学家提出了无偏估计,最大似然估计等等标准。 这里我们先使用最简单的无偏估计: 如果这个估计函数满足:E[σ^2]=E[est(X1,X2.....Xn)]=σ2
我们就把这个估计称为一个无偏估计。

无偏估计的定义是符合直觉的:如此估计出的数值虽然有误差,但误差的期望为零。

有了基本的理论指导,我们先计算一下
i=1n(XiX¯)2=i=1nXi2+i=1nX¯22X¯i=1nXi=i=1nXi2+nX¯22nX¯2=i=1nXi2nX¯2=i=1nXi21n(i=1nXi)2=n1ni=1nXi22ni=1nj=1i1XiXj
哦,这里开始出现我们在大学物理实验教材上处理数据用的,含有n1的式子了。我们进一步研究一下这两类项的期望:
1ijn,E[XiXj]=R2f(x)xf(y)ydxdy=Rf(x)xdxRf(y)ydy=E[X]2=μ2当然,这个结果充分使用了我们假设的前提条件。另外根据非常容易证明的:σ2=E[X2]μ2
可以得到:
1in,E[Xi2]=σ2+μ2
目前原料都准备好了,可以下锅炒菜了。当然,如果你常做计算的话,现在就能看到最终结果了。我们对i=1n(XiX¯)2取期望:
E[i=1n(XiX¯)2]=(n1)n(σ2+μ2)n(n1)μ2n=(n1)σ2
于是我们可以根据以上计算构造出物理实验课本上的那个实验数据标准差的估计公式,而且我们确信这个估计是个对于标准差的无偏估计。同时我们也知道了为什么这个公式里出现的是n1而不是n

由于每次的测量结果是随机变量,最终估计出的标准差也是随机变量。而且,它应当满足某种分布。如果我们要保证某种量具的误差足够小,我们在估计出这种测量方法的标准差还不够,还需要计算σ这个随机变量的分布,才能更好地确定仪器的误差范围。这对于基准传递是很重要的。

就我个人来看,以上计算是容易完成的,并未使用高深的知识技巧。在大学物理实验中只简单地交代了公式却未能给出解释是个遗憾。

[修改于 7年1个月前 - 2018/04/16 21:38:51]

+1  学术分    虎哥    2018/04/15 能用解析方法推出来还是厉害
来自:数理化 / 数学
8
 
2
新版本公告
~~空空如也
iamapighhh 作者
7年1个月前 IP:江西
845333
引用 浪里黑条:
建议楼主在标题前加一个"论"字,要不然看着像提问贴~
很中肯的建议。不过我记得科创的帖子发表之后无法继续编辑了。那我下次注意好啦。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
iamapighhh作者
7年1个月前 IP:江西
845334
@虎哥 想不到我第一个学术分是这么来的。哈哈。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
iamapighhh作者
7年1个月前 IP:江西
845782
引用 jimmy06:
标准差乘上√n/(n-1)就是标准误差
我觉得吧,高中课本上讲的标准差和你这里的标准误差是同样的定义和内涵。按照定义方式计算(或者是估计)需要知道准确的均值。然而在事实上,我们只能估计均值。所以处理实验数据的时候就要用这个含有n-1的式子了。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论

想参与大家的讨论?现在就 登录 或者 注册

所属专业
上级专业
同级专业
iamapighhh
进士 学者 机友 笔友
文章
11
回复
180
学术分
1
2009/06/17注册,2个月11天前活动

在航空领域工作的工程技术人员。

主体类型:个人
所属领域:无
认证方式:手机号
IP归属地:未同步
相似文章推荐
插入公式
评论控制
加载中...
文号:{{pid}}
投诉或举报
加载中...
{{tip}}
请选择违规类型:
{{reason.type}}

空空如也

笔记
{{note.content}}
{{n.user.username}}
{{fromNow(n.toc)}} {{n.status === noteStatus.disabled ? "已屏蔽" : ""}} {{n.status === noteStatus.unknown ? "正在审核" : ""}} {{n.status === noteStatus.deleted ? '已删除' : ''}}
  • 编辑
  • 删除
  • {{n.status === 'disabled' ? "解除屏蔽" : "屏蔽" }}
我也是有底线的