论方差估计公式中为什么是n-1
iamapighhh2018/04/14数学 IP:山东
按:前几天在一个帖子XXXXXXXXXXXXXXXXXXXXXXXX/t/82733讨论中提到了这个问题,虎哥建议我单独开一个贴,于是我就把前几天写的粘在这里吧。

我们在《大学物理实验》中使用的,用于估计多次重复测量同一物理量的标准差计算公式如下:
\[\sigma=\sqrt{\frac{\sum_{i=1}^{n}(X_i-\bar{X})^2}{n-1}}\]
而这与高中学习过的方差的计算公式:
\[\sigma^2=\frac{\sum_{i=1}^{n}(X_i-\bar{X})^2}{n}\]
略有不同。这是为什么?我试着把这个问题说清楚。下面的计算只使用了本科水平的概率论知识。

使用某物理仪器对同一物理量重复测量\(n\)次,此时每次测量结果视为\(n\)个独立同分布的随机变量,记为\(X_1,X_2.....X_n\),或者更数学化地\(\{X_i\}_{1\leq i \leq n}\). 同时我们假设这些随机变量都符合均值\(\mu\),方差\(\sigma^2\)的随机分布\(D(\mu,\sigma^2)\),且存在概率密度分布函数\(f\)(之所以这样说,是因为某些分布方差可以不存在,某些分布可以没有常规意义上的分布函数)。 此时我们为了从\(\{X_i\}_{1\leq i \leq n}\)获取方差的估计值\(\hat{\sigma}^2\),需要选取一个估计函数 (estimator),此函数接受\(n\)个测量值\(\{X_i\}_{1\leq i \leq n}\)作为自变量, 输出方差的估计值, 即:\[est: \mathbb{R}^n \rightarrow \mathbb{R}\] \[\{X_i\}_{1\leq i \leq n} \mapsto \hat{\sigma}^2\]
很显然这样的函数有无数种选取方式, 对应无数种不同的估计方差的方式。而由于\(\{X_i\}_{1\leq i \leq n}\)是一族随机变量,则\(est(\{X_i\}_{1\leq i \leq n})=\hat{\sigma}^2\)也是一个随机变量。

由于估计函数选取的任意性,我们需要一定的标准来判断估计的好与坏。为此,统计学家提出了无偏估计,最大似然估计等等标准。 这里我们先使用最简单的无偏估计: 如果这个估计函数满足:\[E[\hat{\sigma}^2]=E[est(X_1,X_2.....X_n)]=\sigma^2\]
我们就把这个估计称为一个无偏估计。

无偏估计的定义是符合直觉的:如此估计出的数值虽然有误差,但误差的期望为零。

有了基本的理论指导,我们先计算一下
\begin{eqnarray*}
\sum_{i=1}^{n}(X_i-\bar{X})^2&=& \sum_{i=1}^{n}X_i^2 + \sum_{i=1}^{n} \bar{X}^2 -2\bar{X}\sum_{i=1}^{n}X_i\\
&=&\sum_{i=1}^{n}X_i^2 + n\bar{X}^2 -2n\bar{X}^2\\
&=&\sum_{i=1}^{n}X_i^2 - n\bar{X}^2\\
&=&\sum_{i=1}^{n}X_i^2 - \frac{1}{n} (\sum_{i=1}^{n}X_i)^2 \\
&=&\frac{n-1}{n}\sum_{i=1}^{n}X_i^2 -\frac{2}{n} \sum_{i=1}^n\sum_{j=1}^{i-1}X_iX_j
\end{eqnarray*}
哦,这里开始出现我们在大学物理实验教材上处理数据用的,含有\(n-1\)的式子了。我们进一步研究一下这两类项的期望:
\begin{eqnarray*}
\forall 1\leq i \neq j \leq n, E[X_iX_j]&=&\iint_{\mathbb{R}^2}f(x)xf(y)ydxdy\\
&=&\int_{\mathbb{R}}f(x)xdx\int_{\mathbb{R}}f(y)ydy\\
&=&E[X]^2=\mu^2
\end{eqnarray*}当然,这个结果充分使用了我们假设的前提条件。另外根据非常容易证明的:\[\sigma^2=E[X^2]-\mu^2\]
可以得到:
\[\forall  1\leq i \leq n, E[X_i^2]=\sigma^2+\mu^2  \]
目前原料都准备好了,可以下锅炒菜了。当然,如果你常做计算的话,现在就能看到最终结果了。我们对\(\sum_{i=1}^{n}(X_i-\bar{X})^2\)取期望:
\begin{eqnarray*}
E[\sum_{i=1}^{n}(X_i-\bar{X})^2] &=& \frac{(n-1)n(\sigma^2+\mu^2)  - n(n-1)\mu^2 }{n}\\
&=& (n-1)\sigma^2
\end{eqnarray*}
于是我们可以根据以上计算构造出物理实验课本上的那个实验数据标准差的估计公式,而且我们确信这个估计是个对于标准差的无偏估计。同时我们也知道了为什么这个公式里出现的是\(n-1\)而不是\(n\)。

由于每次的测量结果是随机变量,最终估计出的标准差也是随机变量。而且,它应当满足某种分布。如果我们要保证某种量具的误差足够小,我们在估计出这种测量方法的标准差还不够,还需要计算\(\sigma\)这个随机变量的分布,才能更好地确定仪器的误差范围。这对于基准传递是很重要的。

就我个人来看,以上计算是容易完成的,并未使用高深的知识技巧。在大学物理实验中只简单地交代了公式却未能给出解释是个遗憾。

[修改于 6年8个月前 - 2018/04/16 21:38:51]

+1  学术分    虎哥    2018/04/15 能用解析方法推出来还是厉害
来自:数理化 / 数学
8
 
2
已屏蔽 原因:{{ notice.reason }}已屏蔽
{{notice.noticeContent}}
~~空空如也
浪里黑条
6年8个月前 IP:北京
845292
建议楼主在标题前加一个"论"字,要不然看着像提问贴~
引用
评论
1
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
iamapighhh作者
6年8个月前 IP:江西
845333
引用 浪里黑条:
建议楼主在标题前加一个"论"字,要不然看着像提问贴~
很中肯的建议。不过我记得科创的帖子发表之后无法继续编辑了。那我下次注意好啦。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
iamapighhh作者
6年8个月前 IP:江西
845334
@虎哥 想不到我第一个学术分是这么来的。哈哈。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
虎哥
6年8个月前 IP:四川
845339
引用 iamapighhh:
楼主写得很好,加上对理论探讨KC一贯大力支持,即使是科普性的也如此。
论坛帖子一年内都可以编辑,KC的系统像维基,所有历史版本都有记录,改错了还可以回滚。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
jimmy06
6年8个月前 IP:山东
845763
我们物理竞赛实验培训的时候说这个带(n-1)的叫标准误差
我当时的理解是标准差乘上√n/(n-1)就是标准误差,因为符合一定分布函数的数据随着实验次数n的增大标准差不变,而随着实验次数n增大随机误差是是减小的,所以乘上一个随n增大而减小的系数。
我们当时讲课的老师感觉都很水,不知道有没有错误,如有错误,谢谢指正
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
iamapighhh作者
6年8个月前 IP:江西
845782
引用 jimmy06:
标准差乘上√n/(n-1)就是标准误差
我觉得吧,高中课本上讲的标准差和你这里的标准误差是同样的定义和内涵。按照定义方式计算(或者是估计)需要知道准确的均值。然而在事实上,我们只能估计均值。所以处理实验数据的时候就要用这个含有n-1的式子了。
引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论
wuhongyi7
6年5个月前 IP:四川
848436

实际上在样本量较大的时候n和n-1并没有什么区别,用n的是一个渐进无偏估计

引用
评论
加载评论中,请稍候...
200字以内,仅用于支线交流,主线讨论请采用回复功能。
折叠评论

想参与大家的讨论?现在就 登录 或者 注册

所属专业
上级专业
同级专业
iamapighhh
进士 学者 机友 笔友
文章
11
回复
178
学术分
1
2009/06/17注册,3个月20天前活动

在航空领域工作的工程技术人员。

主体类型:个人
所属领域:无
认证方式:手机号
IP归属地:未同步
相似文章推荐
文件下载
加载中...
{{errorInfo}}
{{downloadWarning}}
你在 {{downloadTime}} 下载过当前文件。
文件名称:{{resource.defaultFile.name}}
下载次数:{{resource.hits}}
上传用户:{{uploader.username}}
所需积分:{{costScores}},{{holdScores}}下载当前附件免费{{description}}
积分不足,去充值
文件已丢失

当前账号的附件下载数量限制如下:
时段 个数
{{f.startingTime}}点 - {{f.endTime}}点 {{f.fileCount}}
视频暂不能访问,请登录试试
仅供内部学术交流或培训使用,请先保存到本地。本内容不代表科创观点,未经原作者同意,请勿转载。
音频暂不能访问,请登录试试
支持的图片格式:jpg, jpeg, png
插入公式
评论控制
加载中...
文号:{{pid}}
投诉或举报
加载中...
{{tip}}
请选择违规类型:
{{reason.type}}

空空如也

加载中...
详情
详情
推送到专栏从专栏移除
设为匿名取消匿名
查看作者
回复
只看作者
加入收藏取消收藏
收藏
取消收藏
折叠回复
置顶取消置顶
评学术分
鼓励
设为精选取消精选
管理提醒
编辑
通过审核
评论控制
退修或删除
历史版本
违规记录
投诉或举报
加入黑名单移除黑名单
查看IP
{{format('YYYY/MM/DD HH:mm:ss', toc)}}