5.1 大数定律

数学学习 · 爱知数学讲义

18
本章目录 · 1 节

本章导读

【5.1 大数定律】大数定律研究平均值在什么条件下稳定,中心极限定理研究标准化的和或平均值的分布形状。前者回答“是否靠近均值”,后者回答“波动怎样分布”,两者的结论和标准化尺度不同。

【依概率收敛】若对任意,,等价地,则称依概率收敛于常数,记为。这里趋于1的是事件的概率,不是说某个有限以后绝无偏离,也不是说每增加一次观察,误差都必须减小。

【辛钦弱大数定律】设相互独立、同分布,且、,则

“相互独立”指每个有限子集合均独立,同分布指具有同一个分布。定理本身只要求有限均值,不要求方差有限;不能把下面简化证明中的额外条件误写成完整定理的必要条件。

【有限方差情形的证明】若再有,则,独立性给出。由切比雪夫不等式,。这就证明了有限方差这一较强条件下的结论。只有有限一阶矩的一般情形需用截断等方法,本书不展开其证明。

【连续函数保持收敛】若、,在连续,则。特别地,和、积保持相应极限;商还需要并在分母不为零处定义。此性质不另要求相互独立。

【伯努利大数定律】独立重复试验中事件每次发生概率均为,发生总次数服从。写,其中是相互独立的伯努利指标,均值为,便有。因此对任意,。

【频率稳定的定量界】由,得到。这是在独立同概率模型下的有限样本保证,通常较保守;它给出的是误差事件概率的上界,并非某次观测误差必定满足的上界。

【应用中的边界】大数定律支持以大量同条件重复数据的频率估计概率,但不能保证短期“补偿”或连续输赢之后必定反转。若试验条件变化、样本选择有偏或存在显著依赖,应重新检查模型,不能仅凭样本量大就机械套用。若均值不存在,例如标准柯西变量,则上述有限均值的大数定律不能直接使用。