这一页在讲什么
如果 那么尾概率 不仅不超过 (这是 Markov),而且比 衰减得还快:
- 位置:第 5 部分第三页。上一页(第 29 页)的 阶矩版 Markov 给出 即「 有界」。这一页改进成「 趋于 0」。
- 为什么值得一页:它给出一个必要条件:要想 尾巴必须比 衰减得更快。用它可以快速判断某些矩不存在(例 2)。
- 反方向不成立:下一页(第 31 页)会给出一个尾巴比 衰减得快、 阶矩却仍然无穷的反例。
先补基础
- (有界):尾概率最多像 那样衰减,记作
- 尾概率比 还小一截,记作 (「小 o」)。
- 例: 是 因为 而 是 但不是
若 几乎处处,则 参数是连续变量 时,对任意一列 用 DCT 即可(极限对每一列都一样,就是连续意义下的极限)。
课件原文逐句精读
Proposition 28 (Tail decay for one integrable moment) If for some , then(留白)
蓝条标题:有限矩。
命题 28(一个可积矩带来的尾部衰减) 若对某个 有 则(课件留白,见下一节。)
- one integrable moment:只需要一个矩(某个 有限,不需要所有矩。
- 就是 (第 22 页)。
补全课件留白
课件此处留白(课堂板书),以下内容由本站根据标准教材补写,记号与本课件保持一致;如与老师课堂写法不同,以老师为准。
若 (则
特别地,
在事件 上,所以 ——但这次不扔掉事件,保留示性函数,得到一个比 Markov 更细的界。然后用 DCT 说明它趋于 0。
第 1 步(逐点不等式):在 上,在事件外两边都是 0。所以
第 2 步(取期望):
第 3 步(右边趋于 0,用 DCT):令
- 逐点极限: 推出 几乎必然(否则在正概率事件上 期望也是 对这样的 只要 就有 所以 几乎必然。
- 控制:且
DCT ⇒ 所以
Markov:——把整个期望都拿来当上界。本命题:——只用尾部那一块期望。 越大,尾部那一块越小(被「挤」到 0),所以得到的不仅是有界,而且趋于 0。
图解
以 为例。由 第 12 页, 是尾概率曲线下的总面积,它有限。
- 把横轴在 处切一刀, 右边的那块面积 是一个有限积分的「尾巴」,所以 时它趋于 0。
- 同时,(把 的尾概率曲线画出来就能看出:它在 上是常数 在 上和原曲线一样)。
- 所以 右边是「尾部的期望」,随 增大被挤向 0。
直观地说:面积有限的曲线,尾巴不能太「胖」。如果 一直像 那么大,曲线下面积就是 与 矛盾。
例子
这是 的 Pareto 分布(第 16 页),密度 (取
- 矩有限:
- 命题中的上界:对
- 左边:并且确实
- 对比 Markov:Markov 只给出 看不出趋于 0;命题 28 的界 会随 消失。
对任意 (指数衰减比任何幂次都快)。和命题 28 一致:所有 都有限。
柯西分布的尾巴 ( 很大时)。取 所以 柯西分布没有均值。
拓展延伸
「尾部期望趋于 0」以后会反复出现
证明里的关键量 ( 时就是 本身就很有用:
- 它说的是单个可积变量的「尾巴期望」会变小。要求一族变量的尾巴期望一起变小,就是「一致可积」的定义(小测 2 第 2 题),它是「依概率收敛 ⇒ 期望收敛」的关键条件。
- 作业 1 第 8 题(小集合上的积分一定小)的第二种证法,用的正是同一个 DCT 论证:先把 截成「和「两部分,后一部分的积分趋于 0。
p = 1 时:这正是弱大数定律需要的条件
设 独立同分布,概率论中有一个经典结论(Durrett《Probability: Theory and Examples》第 2.2 节,这里作为已知结论介绍):若 则 依概率,其中 反过来,这个条件也是必要的。
- 时,由本页命题(条件自动成立,并且 于是得到通常的弱大数定律 依概率。
- 条件比 弱。下一页 第 31 页 的变量(再配上随机的正负号(各以概率 得到对称的 (但 由对称性 所以 依概率。
- 然而几乎必然收敛失败: 时 几乎必然没有有限极限(作业 1 第 3 题)。这是「依概率收敛但不几乎必然收敛」的一个自然例子。
常见疑问与易错点
答:不是。下一页(第 31 页)构造了 满足必要条件,但 对数因子 增长得太慢,救不了积分的发散。
答:不是,两者各有用处。Markov 给出定量的界:对每一个具体的 都能算出 最多是多少(例 0 中 时 命题 28 是定性的:它只说 最终趋于 0,却没说多快、从哪个 开始小于给定的数。要算具体数字用 Markov;要证明极限或判断矩是否存在,用命题 28。
答:逐点极限「需要:对每个 终将超过 如果 永远追不上, 不趋于 0。 保证这样的 只组成零测集。
小结与自测
- 命题 28: ⇒ 即尾概率是
- 证明:在尾部事件上 尾部期望由 DCT 趋于 0(控制函数
- 逆否命题可以判断矩不存在: ⇒ (Pareto、柯西)。
- 但反过来不成立(第 31 页)。
1. 若 (哪些 使 由此能确定 吗?
点开看答案
当且仅当 时 由逆否命题 (对 命题 28 本身不能断定 但直接用矩–尾恒等式 第 21 页 可以验证它确实有限。)
2. 判断:若 则 并且
点开看答案
正确。前者是二阶矩版 Markov,后者是命题 28(
3. 命题 28 的证明用到了第 1 讲的哪个定理?控制函数是什么?
点开看答案
控制收敛定理(DCT)。控制函数是 它可积正是因为假设
| 中文 | English | 白话解释 |
|---|---|---|
| 尾概率 | tail probability | 随机变量取到「很大的值」的概率,例如 P(X > t) 或 P(|X| ≥ t)。它随 t 增大而下降得越慢,分布的尾巴就越「厚」。 |
| 阶矩 | moment | E[|X|ᵖ] 叫 p 阶(绝对)矩;它有限与否反映尾部有多「重」。 |
| 几乎处处 | almost everywhere (a.e.) | 除了一个测度为 0 的集合之外都成立;零测集上的值不影响积分。 |
| 控制收敛定理 | dominated convergence theorem (DCT) | fₙ → f 几乎处处且 |fₙ| ≤ g、g 可积时,∫fₙ → ∫f。 |
| 可积 | integrable (L¹) | ∫|f| dμ < ∞。全体可积函数记作 L¹(μ)。 |
| 事件 | event | 样本空间的(允许谈概率的)子集;实现的 ω 落在里面,就说事件发生。 |
| 示性函数 | indicator function | 𝟏_A(x) 在 x ∈ A 时取 1,否则取 0;它的积分就是 A 的测度。 |
| 期望 | expectation | 随机变量对概率测度的积分 E[X] = ∫ X dP,也就是「加权平均」。 |
| 逐点收敛 | pointwise convergence | 对定义域里的每一个点 x,数列 fₙ(x) 都收敛到 f(x);这样得到的函数 f 叫逐点极限。 |
| 几乎必然收敛 | almost sure convergence | 除了概率为 0 的结局以外,Xₙ(ω) 都收敛到 X(ω)。 |
| 上界 | upper bound | 数集 A 的上界是一个数 M,A 里每个数都 ≤ M。例如 2 和 5 都是 [0,1] 的上界;所有上界中最小的那个叫上确界。 |
| 分布 | law / distribution | X 把概率「推」到取值空间上得到的测度:L(X)(B) = P(X ∈ B)。 |
| 一致可积 | uniformly integrable (UI) | 一族随机变量的尾部期望一致地变小:supₜ E[|Xₜ|; |Xₜ| > λ] → 0(λ → ∞)。它是「依概率收敛 ⇒ 期望收敛」的关键条件。 |
| 依概率收敛 | convergence in probability | 对每个 ε > 0,P(|Xₙ − X| > ε) → 0;比几乎必然收敛弱。 |
| 集合 | set | 把一些对象放在一起当成一个整体,例如 {1,2,3}。 |
| 独立同分布 | independent and identically distributed (i.i.d.) | 一列随机变量相互独立,并且分布都相同,例如反复独立地掷同一颗骰子。 |
| 弱大数定律 | weak law of large numbers (WLLN) | 样本均值依概率收敛到真实均值:对每个 ε > 0,P(|Sₙ/n − μ| > ε) → 0。方差有限时可由 Chebyshev 不等式直接推出。 |
| 零测集 | null set | 测度为 0 的集合,例如单点、有理数全体、康托尔集。 |
| 函数 | function / map | f: A → B 给 A 中每个元素指定 B 中唯一一个元素。 |
| 当且仅当 | if and only if (iff) | 「A 当且仅当 B」:A 成立就一定有 B,B 成立也一定有 A,两者同真同假,记作 A ⟺ B。 |