高等概率论逐页精讲

第 3 讲 Borel–Cantelli、收敛与 Radon–Nikodym›第 4 部分 Radon–Nikodym 与换测度

PDF 第 28 / 47 页幻灯片 28/49证明

Radon–Nikodym 导数的唯一性:盯住「一个密度更大」的那个事件

Uniqueness of the Radon–Nikodym derivative

课件原页 · 点击放大 · ← → 键翻页

这一页在讲什么

人话版一句话版

如果两个函数 都能当 关于 的密度,那么它们几乎必然相等:证明的诀窍是只看「 比 大」的那个事件——在那里两者之差是正的,积分却是 0,于是这个事件的概率只能是 0。

  • 上一页 第 27 页 的定理 18 保证密度存在;这一页证明它唯一(在「可以差一个零概率事件」的意义下)。
  • 有了唯一性,才可以说「那个」Radon–Nikodym 导数 而不是「某一个」。
  • 唯一性还是一个很实用的识别工具:只要找到任何一个满足 (对所有 的 它就一定是 第 34 页的链式法则、第 35 页的倒数密度都靠这一招。

先补基础

基础补课事件 {L > L′} 以及它为什么是事件
  • 是 的简写:所有「 的值比 大」的样本点。
  • 它属于 (是合法的事件)。理由:若 两者之间一定夹着一个有理数 反过来 也推出 所以
    而有理数只有可数个,每个 都是事件( 可测,第 29 页),σ-代数对可数并、交封闭(第 9 页)。
基础补课零积分原理:非负函数积分为 0 ⇒ 几乎处处为 0

陈述:若 可测且 则 (这是 第 43 页 的内容,下面给一个只用已学知识的证明。)

  1. 对每个正整数 理由:在 上右边是 在别处右边是
  2. 两边积分(单调性):所以
  3. 而且这些事件随 增大而变大。由从下连续性(第 13 页),
基础补课可积函数的线性
  • 若 (都可积),则 (第 43 页)。
  • 「可积」这个前提不能少:如果两个积分都是 右边就成了没有意义的

课件原文逐句精读

课件原文课件印刷文字

Uniqueness: the event where one density is larger

中文翻译

唯一性:一个密度比另一个大的那个事件

  • 这个小标题把证明的关键一步直接写出来了:要证明两个密度 几乎相等,就去看事件 (「一个密度比另一个大」的地方)。
  • 为什么偏偏看这个事件?因为在这个事件上, 符号是确定的(都是正的)。一个符号确定的函数积分为 0,就只能几乎处处为 0;而一个正负都有的函数积分为 0,完全可能是正负抵消(例如 可 并不是 0)。
  • 蓝条标题 Uniqueness of the Radon–Nikodym derivative:Radon–Nikodym 导数的唯一性。

补全课件留白

补充说明

课件此处留白(课堂板书),以下内容由本站根据标准教材补写,记号与本课件保持一致;如与老师课堂写法不同,以老师为准。

Uniqueness: the event where one density is larger|唯一性:一个密度比另一个大的那个事件

命题(Radon–Nikodym 导数的唯一性)

设 是 上的概率测度, 都是 -可测的非负函数,并且

那么 -几乎必然,即

推导证明思路

先证 在事件 上,但它在 上的积分等于 由零积分原理 再把 对调,得 两部分合起来就是

一步一步来:

  1. 取事件:令 由「先补基础」,所以可以把它代入假设。
  2. 两个积分都有限:所以 都是可积函数。这里用到了 是概率(总量有限)。
  3. 差的积分为 0:由可积函数的线性,
  4. 被积函数非负,并且恰好在 上为正:令 在 上 所以 在 外 因此 处处成立,并且
  5. 用零积分原理(第 43 页): 且 所以
  6. 对称:把 和 的角色对调(假设对两者是对称的),同样得到 其中
  7. 合起来:所以

证毕。

人话版画一张图想一想

在 的情形,把 和 画成两条曲线。事件 就是「 的曲线在 上方」的那些横坐标。第 3 步说:在 上方,两条曲线夹出来的面积是 0。可是在 上两条曲线确实分开了(上面那条严格高),夹出面积为 0 的唯一可能是: 这片横坐标的总长度是 0。这就是第 5 步。

为什么只能是「几乎必然」唯一

反过来也成立:如果 和一个密度 只在一个 -零概率事件 上不同,那么 也是密度。 理由:对每个 和 只在 上可能不同,而零概率事件上的改动不影响积分(第 43 页),所以

所以「几乎必然唯一」已经是最好的结论了:想要「每一点都唯一」是不可能的。当我们写「时,意思是「 是一个密度,任何其他密度都和它几乎必然相等」。教材里把这样一个具体的函数叫作 Radon–Nikodym 导数的一个版本(version)。

另一种证明:不做减法(选读)

对正整数 令 在 上 积分得

因为 是有限数,两边减去它得 所以 又因为 时总有某个 使 所以 由从下连续性 这个证明同样在「两边减去 处用到了

总量无穷时唯一性可以失败(选读)

取只有一个点的空间 (它们是测度,但不是概率)。常数函数 和 都满足 对 两边都是 (对 两边都是 0。可是 在整个 上成立,而 上面证明的第 3 步在这里变成 没有意义。所以第 2 步的有限性不是装饰,是证明的关键。

例子

例 1:在有理数上乱改,密度仍然是同一个

的密度 令

  • 也是 的密度: 包含在 的有理数集里,长度为 0,所以对每个
  • 这和命题一致:命题说两者几乎必然相等,这里 确实成立。
  • 这个 处处不连续,看起来和 很不一样,但作为密度它们没有区别。
例 2:离散空间里,唯一性只在零概率点上失效

取两个候选密度 (按 的顺序)。

  • 两者都是密度:它们只在 上不同,而
  • 按证明走一遍:所以
  • 在 这两个 -概率为正的点上, 的值被 唯一确定,改不了。
例 3:两个不同的函数,事件 {L > L′} 上就露馅

和 都满足非负、积分为 1,它们各自定义一个概率 它们是不是同一个概率?

  • 看「一个密度更大」的事件
  • 在同一个事件上给出不同的概率,所以 这正是证明的逻辑:只要两个函数在一个正概率事件上真的不同,在「谁更大」的那个事件上积分就会不同。
例 4:密度几乎必然等于 1 ⟺ 两个概率相同

设

  • 若 -几乎必然:对每个 (零概率事件上的差别不影响积分),所以
  • 若 :常数函数 满足 所以 是一个密度;由唯一性,任何密度 都满足 -几乎必然。
  • 用法:想判断两个概率是不是同一个,可以算它们的密度,看是否几乎必然等于 1。例如 第 31 页 的两点空间中, 恰好发生在 的时候。

常见疑问与易错点

易错点问:为什么不直接看事件 {L ≠ L′}?

答:在 上, 有时为正、有时为负,积分为 0 可能只是正负抵消,推不出任何东西。把它拆成 和 两块,每一块上符号固定,才能用零积分原理。这就是小标题 the event where one density is larger 的用意。

易错点问:证明里哪一步用到了「ℚ 是概率」?

答:第 2、3 步。要把 拆成两个积分相减,两个积分都必须有限;这里它们都等于 上面的选读例子说明,总量无穷时这一步会变成 唯一性也真的会失败。

易错点问:既然密度不唯一,那「dℚ/dℙ」到底指哪一个函数?

答:指这些几乎必然相等的函数中的任何一个。所有关于它的等式都理解成「-几乎必然成立」,例如链式法则 第 34 页 就明确写着 -a.s.。在只关心积分、概率、期望的问题里,选哪个版本结果都一样。

易错点问:几乎必然相等的两个函数,在某一点的值可以差很多吗?

答:可以,例 1 里 而 「几乎必然相等」只保证不相等的点合起来概率为 0,不限制在这些点上差多少。

小结与自测

小结本页小结
  • 唯一性:两个密度 若对所有事件给出相同的 则
  • 关键一步:在 上 但积分 由零积分原理 对称地
  • 「几乎必然」唯一是最好的结论:在零概率事件上改动密度不影响任何积分。
  • 有限性(保证了减法有意义;总量无穷时唯一性可以失败。
  • 用途:找到任何一个合格的 它就是
自测

1. 它们给出同一个 吗?

点开看答案

给出同一个 两者只在有理数上可能不同( 在有理数上是 0),而 中有理数的全体长度为 0,所以 对每个 积分都相同。

2. 在证明中,为什么 处处非负?

点开看答案

在 上,乘以 仍为正;在 外,所以处处 这正是只看「 更大」的事件带来的好处。

3. 设 是否在每一点都唯一?为什么?

点开看答案

每一点都唯一。两点的 -概率都为正,只有空集是 -零概率事件,「几乎必然相等」在这里就等于「处处相等」。具体地 检查

本页术语中英对照(按出现顺序)
中文English白话解释
函数function / mapf: A → B 给 A 中每个元素指定 B 中唯一一个元素。
几乎必然收敛almost sure convergence除了概率为 0 的结局以外,Xₙ(ω) 都收敛到 X(ω)。
事件event样本空间的(允许谈概率的)子集;实现的 ω 落在里面,就说事件发生。
Radon–Nikodym 导数Radon–Nikodym derivativeQ ≪ P 时存在 L = dQ/dP ≥ 0,使 Q(A) = ∫_A L dP;它是「换测度的密度」。
样本点sample point一个完整的结局 ω;每次试验恰好实现一个样本点。
有理数rational number能写成分数 p/q 的数,全体有理数记作 ℚ;它们可数,却在数轴上处处稠密。
可数countable元素能排成第 1 个、第 2 个、第 3 个……的一列(有限也算),例如自然数、有理数。
σ-代数sigma-algebra允许谈概率的「事件清单」:含 Ω,对补集和可数并封闭。
从下连续continuity from below集合一层层变大(Eₙ ↑ E)时,测度也跟着收敛:μ(Eₙ) → μ(E)。
可积integrable (L¹)∫|f| dμ < ∞。全体可积函数记作 L¹(μ)。
几乎处处almost everywhere (a.e.)除了一个测度为 0 的集合之外都成立;零测集上的值不影响积分。
概率测度probability measure总质量 P(Ω) = 1 的测度。
测度measure给 σ-代数里的每个集合一个 [0, ∞] 中的「大小」,空集为 0,并且可数可加。
期望expectation随机变量对概率测度的积分 E[X] = ∫ X dP,也就是「加权平均」。
空集empty set一个元素也没有的集合,记作 ∅。作为事件,它永远不会发生。