LECTURE 03 · P15–P19 原课总长 1:44:23 · B 站 BV1KuJt6zE2t第 3 讲 · 随机变量的本质与分布函数:可测映射 X(ω)、右连续 CDF 与概率密度 Lecture 3 · Essence of Random Variables & CDFs: Measurable Mapping X(ω), Right-Continuous F_X(x) & Probability Density
彻底粉碎“随机变量是变来变去的小精灵”的字面错觉:随机变量其实一点随机性都没有,它是给非数值样本空间 Ω 穿上“数的马甲”的确定性可测函数 X: Ω → ℝ!深入剖析 Borel 原像可测条件 X⁻¹(A) ∈ ℱ、分布函数 FX (x) 的右连续与第一类跳跃质量 ΔF(x₀) = ℙ(X=x₀)、概率密度 fX (x) = FX '(x) 的父子对偶,以及概率论与数理统计的哲学分野。
原课分片 (点击跳转 B 站对应分P播放): P15 · 01 (20:53) P16 · 02 (20:53) P17 · 03 (20:53) P18 · 04 (20:53) P19 · 05 (20:53)本讲主线与问题意识 · LECTURE NARRATIVE ARC
本讲是连接抽象公理化概率空间 ( Ω , F , P ) (\Omega,\mathcal{F},\mathbb{P}) ( Ω , F , P ) 与微积分分析工具的核心枢纽(对应原课视频 P15–P19,总长约 104 分钟)。在课堂开篇(▶ P15 04:05–06:21 ),张颢老师直面概率论初学者最容易产生概念混乱的名词——随机变量(Random Variable) :中学生常望文生义,以为随机变量是一个“变来变去、抓不住的小精灵”;但数学是严密的逻辑大厦,小说里的精灵绝不可能进入数学!
张颢老师在黑板上给出了振聋发聩的严格界定:随机变量 X : Ω → R X: \Omega \to \mathbb{R} X : Ω → R 是一个百分之百确定性的函数,它本身一点随机性都没有! (▶ P15 10:48–12:20 )它的使命是给非数值的物理样本空间 Ω \Omega Ω (如硬币正反面、晴天下雨刮风下雪)“穿上一件数的马甲” ,使实验结果得以享受实数加减乘除与微积分运算的权利;而整个概率体系中唯一存在随机性的地方 ,仅仅在于底层物理统计实验产生哪个样本点 ω ∈ Ω \omega\in\Omega ω ∈ Ω 的变现瞬间(▶ P15 17:23–19:59 )。围绕这一主线,本讲层层推进:从保证实数轴 Borel 好集合都能算概率的可测性原像条件 X − 1 ( A ) ∈ F X^{-1}(A)\in\mathcal{F} X − 1 ( A ) ∈ F (P16),到将离散求和与连续积分一勺烩的概率密度 f X ( x ) f_X(x) f X ( x ) 与累积分布函数 F X ( x ) F_X(x) F X ( x ) (父子导数关系、右连续性与第一类跳跃点质量) (P17–P18),再到压轴廓清“同分布 vs 逐点相等” 以及“概率论(先验模型推决策)vs 数理统计(由数据归纳模型)” 的学科边界(P19)。
本讲核心攻克目标: 彻底破除字面迷思:理解为什么随机变量 X : Ω → R X: \Omega \to \mathbb{R} X : Ω → R 是毫无随机性的确定性函数 (给非数值样本空间 Ω \Omega Ω 穿上“数的马甲”),明确整个体系中唯一产生随机性的根源是底层统计实验到样本空间 Ω \Omega Ω 的物理变现。
透彻掌握随机变量的可测性(Measurability)条件 :为什么必须要求实轴 Borel 集 A ∈ B ( R ) A\in\mathcal{B}(\mathbb{R}) A ∈ B ( R ) (特别是基础生成元 ( − ∞ , x ] (-\infty,x] ( − ∞ , x ] )的原像 X − 1 ( A ) = { ω ∈ Ω : X ( ω ) ∈ A } ∈ F X^{-1}(A) = \{\omega\in\Omega: X(\omega)\in A\} \in \mathcal{F} X − 1 ( A ) = { ω ∈ Ω : X ( ω ) ∈ A } ∈ F ?看清实轴诱导概率 P ~ ( A ) \tilde{\mathbb{P}}(A) P ~ ( A ) 与底层概率 P \mathbb{P} P 的主从关系。
熟练掌握累积分布函数 F X ( x ) = P ( X ≤ x ) F_X(x) = \mathbb{P}(X\le x) F X ( x ) = P ( X ≤ x ) 的四大核心性质(两端极限 0 0 0 与 1 1 1 、单调不减、右连续性 lim ε ↓ 0 F X ( x + ε ) = F X ( x ) \lim_{\varepsilon\downarrow 0}F_X(x+\varepsilon)=F_X(x) lim ε ↓ 0 F X ( x + ε ) = F X ( x ) 、第一类跳跃间断点至多可数个且跳跃高度 Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) \Delta F_X(x_0) = F_X(x_0)-F_X(x_0^-) = \mathbb{P}(X=x_0) Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) 代表单点概率质量 Mass)。
理解概率密度函数 f X ( x ) = F X ′ ( x ) f_X(x) = F_X'(x) f X ( x ) = F X ′ ( x ) 与分布函数的微积分“父子关系”:为什么连续型随机变量单点概率 P ( { x } ) = 0 ≠ f X ( x ) \mathbb{P}(\{x\})=0\neq f_X(x) P ({ x }) = 0 = f X ( x ) 而局部概率为 f X ( x ) Δ x f_X(x)\Delta x f X ( x ) Δ x ?如何用狄拉克 δ \delta δ 函数 f X ( x ) = ∑ k p k δ ( x − x k ) f_X(x)=\sum_k p_k\delta(x-x_k) f X ( x ) = ∑ k p k δ ( x − x k ) 将离散与连续统一在同一积分框架下?并辨析概率论 vs 数理统计 的根本差异。
1. 为什么需要随机变量?确定性可测映射 X: Ω → ℝ 与“数的马甲” 破除中学生将随机变量视为“变来变去的小精灵”的字面误区:张颢老师指出,随机变量 X: Ω → ℝ 是毫无随机性的确定性函数,旨在将非数值的物理样本点(正反面、阴晴雨雪)量化为实数以启用微积分工具;并深入阐明为什么必须要求 Borel 集原像满足 X⁻¹(A) ∈ ℱ(可测性)。
1.1 破除字面迷思:为什么说随机变量“一点随机性都没有”?(▶ P15 04:05–12:56 )
在复习完概率空间三元组 ( Ω , F , P ) (\Omega, \mathcal{F}, \mathbb{P}) ( Ω , F , P ) 后,张颢老师在 ▶ P15 04:05 引入了本讲第一个核心概念——随机变量(Random Variable) 。
中学生常见的字面错觉(“抓不住的小精灵”,▶ P15 05:04–06:21 ) :
很多同学在高中就听说过“随机变量”,但往往把注意力全放在“随机”二字上,脑海里把它想象成一个“在那里随机变来变去、事先根本抓不住的小精灵”。张颢老师一针见血地指出:“数学是从公理出发按逻辑编织的严密大厦,不是一部小说——小精灵只会出现在小说里,绝不可能进入严格的数学大厦!”
随机变量的真正数学定义(▶ P15 06:21–12:20 ) :
随机变量是一个函数 X : Ω → R X: \Omega \to \mathbb{R} X : Ω → R :它的定义域是样本空间 Ω \Omega Ω ,值域是实数轴 R \mathbb{R} R ;
它起到什么作用?——对样本空间做数量化(穿上一件“数的马甲”,▶ P15 07:23–10:48 ) :
底层样本空间 Ω \Omega Ω 是一个偏物理、具象的集合,里面的样本点 ω \omega ω 未必是数 !例如:
抛硬币:Ω = { 正面 , 反面 } \Omega = \{\text{正面}, \text{反面}\} Ω = { 正面 , 反面 } ——“正面 × \times × 反面”、“正面 × 反面 \times \sqrt{\text{反面}} × 反面 ”是什么概念?根本没法算!
预测天气:Ω = { 晴天 , 下雨 , 刮风 , 下雪 } \Omega = \{\text{晴天}, \text{下雨}, \text{刮风}, \text{下雪}\} Ω = { 晴天 , 下雨 , 刮风 , 下雪 } ——“晴天 3 × 下雨 2 \text{晴天}^3 \times \text{下雨}^2 晴天 3 × 下雨 2 ”更是令人啼笑皆非(▶ P15 08:58 )!
如果不把这些物理结果变成实数,人类千锤百炼的加减乘除、乘方开方乃至微积分工具全都无从下手。随机变量 X ( ω ) X(\omega) X ( ω ) 解决的就是给样本空间“数量化”的问题——把每个样本点 ω ∈ Ω \omega\in\Omega ω ∈ Ω 映射为实数轴 R \mathbb{R} R 上的一个点,使它成为真正的数,从而享受实数的一切运算权利!
随机变量本身是一个完全确定性的函数(▶ P15 10:48–12:20 ) :
一旦给定随机变量 X X X ,对于任何一个样本点 ω ∈ Ω \omega\in\Omega ω ∈ Ω ,它对应哪个实数 X ( ω ) X(\omega) X ( ω ) 是铁板钉钉、毫无悬念的(就像给每个样本点穿上了一件写着数字的马甲)。作为函数,X X X 一丝一毫的随机性都没有!
1.2 灵魂追问:既然随机变量没有随机性,那概率论里的“随机性”究竟藏在哪里?(▶ P15 12:56–20:53 & ▶ P16 00:00–01:23 )
张颢老师在黑板上画出了从物理世界到数学世界的完整映射链条 (▶ P15 14:24–20:53 ):
统计实验 (物理/生物/气象) → (唯一随机性的根源!) 随机变现 Ω = { ω 1 , ω 2 , … } → (100% 确定性量化函数) 随机变量 X ( ω ) R ( 实数轴 ) \text{统计实验 (物理/生物/气象)} \;\xrightarrow[\text{(唯一随机性的根源!)}]{\text{随机变现}}\ \;\Omega = \{\omega_1, \omega_2, \dots\} \;\xrightarrow[\text{(100\% 确定性量化函数)}]{\text{随机变量 } X(\omega)}\ \;\mathbb{R}\;(\text{实数轴}) 统计实验 ( 物理 / 生物 / 气象 ) 随机变现 (唯一随机性的根源!) Ω = { ω 1 , ω 2 , … } 随机变量 X ( ω ) ( 100% 确定性量化函数) R ( 实数轴 )
整个概率体系中唯一存在随机性的地方 ,仅仅在于最左侧箭头——从统计实验到样本空间 Ω \Omega Ω 的变现过程 (在实验做完前,事先不知道究竟是 ω 1 \omega_1 ω 1 还是 ω 2 \omega_2 ω 2 变现出现,▶ P15 18:00–19:21 );
注意:统计实验及其产生的物理结果 ω \omega ω 甚至还属于物理、化学、生物或气象学范畴;从随机变量 X : Ω → R X: \Omega \to \mathbb{R} X : Ω → R 这一步开始,我们才真正把“物理的具象”转化为“数学的抽象”,正式步入严密的数学轨道! (▶ P15 19:59–20:53 & ▶ P16 00:00–00:59 )
1.3 为什么要求“可测(Measurable)”?原像拉回条件 X − 1 ( A ) ∈ F X^{-1}(A) \in \mathcal{F} X − 1 ( A ) ∈ F 与两个概率符号辨析(▶ P16 01:23–20:53 & ▶ P17 00:00–03:43 )
在严肃的概率论教材中,定义随机变量时总会加上一个看似高深莫测的定语——“可测函数(Measurable Function)” (▶ P16 01:23 )。为什么不能随便拿一个函数 X : Ω → R X: \Omega \to \mathbb{R} X : Ω → R 当随机变量?
可测性要解决的核心问题(▶ P16 02:27–10:37 ) :
在第 2 讲中我们知道,实数轴 R \mathbb{R} R 上存在 Vitali 不可测集,因此我们在实数轴上建立了由“好集合”构成的 Borel σ \sigma σ -域 B ( R ) \mathcal{B}(\mathbb{R}) B ( R ) ;
当我们通过随机变量 X X X 把工作空间搬到实数轴 R \mathbb{R} R 上后,我们最关心的就是实数轴上任意一个好集合 A ∈ B ( R ) A \in \mathcal{B}(\mathbb{R}) A ∈ B ( R ) (例如区间 ( − ∞ , x ] (-\infty, x] ( − ∞ , x ] 或 ( a , b ] (a,b] ( a , b ] )的概率;
但别忘了:实数轴本身只是穿上的“马甲”,真正的概率测度 P \mathbb{P} P 只定义在底层样本空间的事件域 F \mathcal{F} F 上! 要算实数集合 A ⊂ R A \subset \mathbb{R} A ⊂ R 的概率,唯一的办法是把 A A A 沿着函数 X X X 逆向拉回(求原像 Pre-image) 到底层样本空间 Ω \Omega Ω 中:
X − 1 ( A ) = { ω ∈ Ω ∣ X ( ω ) ∈ A } X^{-1}(A) = \bigl\{\omega \in \Omega \;\big|\; X(\omega) \in A\bigr\} X − 1 ( A ) = { ω ∈ Ω X ( ω ) ∈ A }
如果函数 X X X 太过病态,导致实轴上某个好集合 A ∈ B ( R ) A \in \mathcal{B}(\mathbb{R}) A ∈ B ( R ) 拉回 Ω \Omega Ω 后的原像 X − 1 ( A ) X^{-1}(A) X − 1 ( A ) 掉出了底层概率的定义域 F \mathcal{F} F (变成不可测集),那概率 P \mathbb{P} P 就当场罢工、算不出来了!
因此,“可测性”的要求天经地义(▶ P16 09:14–10:10 ) :
∀ A ∈ B ( R ) , X − 1 ( A ) = { ω ∈ Ω ∣ X ( ω ) ∈ A } ∈ F \forall A \in \mathcal{B}(\mathbb{R}), \qquad X^{-1}(A) = \bigl\{\omega \in \Omega \mid X(\omega) \in A\bigr\} \in \mathcal{F} ∀ A ∈ B ( R ) , X − 1 ( A ) = { ω ∈ Ω ∣ X ( ω ) ∈ A } ∈ F
(由于逆像运算完美保持可数交、并、补,只需保证 Borel 域的基础生成元 ( − ∞ , x ] (-\infty, x] ( − ∞ , x ] 的原像 { X ≤ x } ∈ F \{X \le x\} \in \mathcal{F} { X ≤ x } ∈ F 即可!)
黑板细节洞察:两个概率符号 P ~ \tilde{\mathbb{P}} P ~ 与 P \mathbb{P} P 的“滥用(Abuse of Notation)”(▶ P16 17:26–20:53 & ▶ P17 00:00–03:43 ) :
当我们写下“随机变量 X X X 等于某个实数 x x x (或属于实数集 A A A )的概率”时,黑板等式为:
P ~ ( X = x ) = P ( { ω ∈ Ω ∣ X ( ω ) = x } ) , P ~ ( X ∈ A ) = P ( { ω ∈ Ω ∣ X ( ω ) ∈ A } ) \tilde{\mathbb{P}}(X = x) = \mathbb{P}\bigl(\{\omega \in \Omega \mid X(\omega) = x\}\bigr), \qquad \tilde{\mathbb{P}}(X \in A) = \mathbb{P}\bigl(\{\omega \in \Omega \mid X(\omega) \in A\}\bigr) P ~ ( X = x ) = P ( { ω ∈ Ω ∣ X ( ω ) = x } ) , P ~ ( X ∈ A ) = P ( { ω ∈ Ω ∣ X ( ω ) ∈ A } )
张颢老师特别指出(▶ P16 20:04 & ▶ P17 00:00 ):严格来说,等号左边的 P ~ \tilde{\mathbb{P}} P ~ 作用在实数轴的 Borel 子集 B ( R ) \mathcal{B}(\mathbb{R}) B ( R ) 上,而等号右边的 P \mathbb{P} P 作用在样本空间的子集 F \mathcal{F} F 上,是右边的底层先验概率 P \mathbb{P} P 诱导出了左边的实轴概率 P ~ \tilde{\mathbb{P}} P ~ !为了书写简便,学术界习惯省去波浪线、两边共用同一个字母 P \mathbb{P} P ,但大家心里必须清楚:右边底层的 Ω \Omega Ω 才是真正的“本”与“根”!
CLASSROOM BOARD DIAGRAM · 张颢老师课堂黑板原图矢量化复原 黑板原图复原 1:随机变量作为确定性量化函数 X : Ω → R X:\Omega\to\mathbb{R} X : Ω → R 与唯一随机源(▶ P15 14:56 ) 严格复原张颢老师在 ▶ P15 15:11 黑板左侧手绘的四层结构图:唯一不确定性在“Statistical Experiment → ω i \omega_i ω i ”,而 X : Ω → R X:\Omega\to\mathbb{R} X : Ω → R 是确定性量化函数。
(Ω, ℬ, P) Probability Space (Triple)
Random Variable X : Ω → ℝ
Deterministic Function
Quantization (量化马甲)
Statistical Experiment (Uncertainty Source)
ω₁
ω₂
ω₃
ω₄ ⋯
破除“小精灵”迷思(▶ P15 08:30 ) :随机变量 X ( ω ) X(\omega) X ( ω ) 内部没有任何随机机关,它是一个从 Ω \Omega Ω 到实轴 R \mathbb{R} R 的 100% 确定性函数(Deterministic Function) 。
唯一随机源(▶ P15 14:56 ) :真正的随机性发生在统计实验抽取样本点 ω 1 , ω 2 , ⋯ ∈ Ω \omega_1, \omega_2, \dots \in \Omega ω 1 , ω 2 , ⋯ ∈ Ω 的那一刻;X X X 的作用是给非数值结果穿上“数的马甲(Quantization)”。
可测性拉回条件(▶ P16 04:20 ) :对任意实轴半无限区间 ( − ∞ , x ] (-\infty,x] ( − ∞ , x ] ,其原像 X − 1 ( ( − ∞ , x ] ) = { ω ∈ Ω : X ( ω ) ≤ x } X^{-1}((-\infty,x]) = \{\omega\in\Omega: X(\omega)\le x\} X − 1 (( − ∞ , x ]) = { ω ∈ Ω : X ( ω ) ≤ x } 必须落在事件域 F \mathcal{F} F 中。
BLACKBOARD DERIVATION RECONSTRUCTION · 张颢老师黑板推导完整复原
Step ① 定位随机性根源与确定性数量化映射 X: Ω → ℝ
统计实验 → 唯一随机变现 ω ∈ Ω → 确定性函数(穿数的马甲) X ( ω ) ∈ R \text{统计实验} \xrightarrow{\text{唯一随机变现}} \omega \in \Omega \xrightarrow{\text{确定性函数(穿数的马甲)}} X(\omega) \in \mathbb{R} 统计实验 唯一随机变现 ω ∈ Ω 确定性函数(穿数的马甲) X ( ω ) ∈ R 对应 ▶ P15 06:21–20:53 :随机变量 X X X 本身毫无随机性,它完成的是从各门自然学科的物理具象到实数抽象的跃升。
Step ② 可测性定义(Borel 原像拉回)与诱导概率主从关系
∀ A ∈ B ( R ) , X − 1 ( A ) = { ω ∈ Ω ∣ X ( ω ) ∈ A } ∈ F ⟹ P ~ ( X ∈ A ) ⏟ 实轴诱导概率 : = P ( { ω ∈ Ω ∣ X ( ω ) ∈ A } ) ⏟ 样本空间先验概率(根源) \forall A \in \mathcal{B}(\mathbb{R}),\quad X^{-1}(A) = \{\omega\in\Omega \mid X(\omega)\in A\} \in \mathcal{F} \quad\Longrightarrow\quad \underbrace{\tilde{\mathbb{P}}(X\in A)}_{\text{实轴诱导概率}} := \underbrace{\mathbb{P}\bigl(\{\omega\in\Omega \mid X(\omega)\in A\}\bigr)}_{\text{样本空间先验概率(根源)}} ∀ A ∈ B ( R ) , X − 1 ( A ) = { ω ∈ Ω ∣ X ( ω ) ∈ A } ∈ F ⟹ 实轴诱导概率 P ~ ( X ∈ A ) := 样本空间先验概率(根源) P ( { ω ∈ Ω ∣ X ( ω ) ∈ A } ) 对应 ▶ P16 08:13–20:53 & ▶ P17 00:00–03:43 :保证实轴上所有好集合(Borel 集)都能合法调用底层概率 P \mathbb{P} P 。
直观交互 · 02
随机变量映射器 X : Ω → ℝ 与分布函数 FX (x) 的生成 阶梯离散型(纯跳跃 CDF) 混合型(x=0.6 处含 0.4 质量原子跳跃) 非单调二次映射 X(ω)=3(2ω−1)²
交互提示: 拖动阈值 x,观察左图样本空间 Ω=[0,1] 上满足 X(ω) ≤ x 的高亮原像区间如何决定右图分布函数 FX (x) 的高度;切到“混合型”并将 x 移至 0.6,观察平顶常值区间如何产生分布函数的跳跃点。
诱导分布函数值 FX (x) 0.700 等于左图高亮逆像区间的测度 P({ω : X(ω) ≤ x})
当前点跳跃度 P(X = x) 0.400 FX (x) − FX (x⁻):连续点处为 0,原子点处 > 0
原像集合 X⁻¹((-∞, x]) [0.00, 0.70] 可测性要求该原像必属于事件域 ℱ
确定性函数 X : Ω → ℝ 高亮底带为逆像 Aₓ = {ω ∈ Ω : X(ω) ≤ x} ω ∈ Ω X(ω) 诱导分布函数 F_X(x) = P(X ≤ x) 右连续单调非减,跳跃高度即点概率 P(X=x) x ∈ ℝ FX (x) 深度思辨与反例剖析 (CRITICAL INSIGHT & PITFALL)既然写完 F X ( x ) F_X(x) F X ( x ) 和 f X ( x ) f_X(x) f X ( x ) 后,平时做题几乎不再提样本空间 Ω \Omega Ω ,是不是意味着 Ω \Omega Ω 可以彻底忘掉了?(▶ P16 15:57–19:28 & ▶ P17 02:37–03:43 )
张颢老师提醒:在计算单个随机变量的概率时,我们确实可以暂时“忘掉” Ω \Omega Ω 、直接在实数轴 R \mathbb{R} R 上算积分;但心里绝不能忘记 P ( X ∈ A ) = P ( { ω ∈ Ω : X ( ω ) ∈ A } ) \mathbb{P}(X\in A) = \mathbb{P}(\{\omega\in\Omega: X(\omega)\in A\}) P ( X ∈ A ) = P ({ ω ∈ Ω : X ( ω ) ∈ A }) 才是真正的“根”!一旦进入多元概率论(研究两个随机变量 X ( ω ) X(\omega) X ( ω ) 与 Y ( ω ) Y(\omega) Y ( ω ) 的和、积、条件期望或各种收敛模式),如果不回到同一个底层样本空间 Ω \Omega Ω 上考察它们的逐点映射耦合,连 X + Y X+Y X + Y 是什么都无法定义!
本节方法论沉淀 · KEY TAKEAWAYS 随机变量是确定性函数 :它不是小说里变来变去的小精灵,而是从 Ω \Omega Ω 到 R \mathbb{R} R 的确定性映射,作用是给非数值样本点穿上“数的马甲”。
可测性的直观本质 :实数轴上的好集合(B ( R ) \mathcal{B}(\mathbb{R}) B ( R ) )拉回样本空间 Ω \Omega Ω 后也必须是好集合(F \mathcal{F} F ),即 ∀ A ∈ B ( R ) , X − 1 ( A ) ∈ F \forall A\in\mathcal{B}(\mathbb{R}),\; X^{-1}(A)\in\mathcal{F} ∀ A ∈ B ( R ) , X − 1 ( A ) ∈ F 。
标记本节已精读 2. 累积分布函数 FX (x) = ℙ(X ≤ x) 的四大性质:右连续性、第一类跳跃间断点与点质量 从 Borel 域的基础生成元 (-∞, x] 出发引出累积分布函数 FX (x) = ℙ(X ≤ x),完整剖析其四大核心性质(两端极限 0 与 1、单调不减、右连续性约定、跳跃点高度 ΔFX (x₀) = ℙ(X = x₀) 代表单点概率质量 Mass),并证明任何分布函数的间断点只能是第一类跳跃间断点且至多可数无穷个。
2.1 分布函数 F X ( x ) F_X(x) F X ( x ) 的诞生:锁定 Borel 域的基础生成元 ( − ∞ , x ] (-\infty, x] ( − ∞ , x ] (▶ P17 16:24–20:26 )
在 ▶ P17 16:24 ,张颢老师将第 2 讲的 Borel σ \sigma σ -域生成元与随机变量巧妙串联起来:
既然实数轴上所有复杂集合都是由最基本的左无限半闭区间 A = ( − ∞ , x ] A = (-\infty, x] A = ( − ∞ , x ] 通过可数次交、并、补生成的,那么只要我们把随机变量 X X X 落在每一个基础生成元 ( − ∞ , x ] (-\infty, x] ( − ∞ , x ] 内的概率算清楚,整个实数轴上的概率分布就彻底确定了!
这个随阈值 x ∈ R x \in \mathbb{R} x ∈ R 变化的函数,就称为随机变量 X X X 的分布函数(或累积分布函数,Cumulative Distribution Function, CDF) :
F X ( x ) : = P ( X ∈ ( − ∞ , x ] ) = P ( X ≤ x ) = P ( { ω ∈ Ω ∣ X ( ω ) ≤ x } ) F_X(x) := \mathbb{P}\bigl(X \in (-\infty, x]\bigr) = \mathbb{P}(X \le x) = \mathbb{P}\bigl(\{\omega \in \Omega \mid X(\omega) \le x\}\bigr) F X ( x ) := P ( X ∈ ( − ∞ , x ] ) = P ( X ≤ x ) = P ( { ω ∈ Ω ∣ X ( ω ) ≤ x } )
无论 X X X 是离散型、连续型还是混合型,分布函数 F X ( x ) = P ( X ≤ x ) F_X(x) = \mathbb{P}(X \le x) F X ( x ) = P ( X ≤ x ) 的定义完全通用 (▶ P18 01:17–02:46 )!
2.2 累积分布函数 F X ( x ) F_X(x) F X ( x ) 的四大核心性质(▶ P18 15:07–20:53 & ▶ P19 00:00–03:44 )
在 ▶ P18 15:07 起,张颢老师在黑板上逐一梳理了任意合法分布函数 F X ( x ) F_X(x) F X ( x ) 必须满足的四条铁律:
性质 ①:无穷远处的规范极限(▶ P18 15:07–15:36 )
F X ( − ∞ ) = lim x → − ∞ F X ( x ) = 0 , F X ( + ∞ ) = lim x → + ∞ F X ( x ) = 1 F_X(-\infty) = \lim_{x \to -\infty} F_X(x) = 0, \qquad F_X(+\infty) = \lim_{x \to +\infty} F_X(x) = 1 F X ( − ∞ ) = x → − ∞ lim F X ( x ) = 0 , F X ( + ∞ ) = x → + ∞ lim F X ( x ) = 1
(直观含义:X ≤ − ∞ X \le -\infty X ≤ − ∞ 趋于空集 ∅ \emptyset ∅ ,概率为 0 0 0 ;X ≤ + ∞ X \le +\infty X ≤ + ∞ 趋于全集 Ω \Omega Ω ,概率为 1 1 1 。)
性质 ②:单调不减性(Monotone Non-decreasing,▶ P18 15:36–16:21 )
对任意 x 1 < x 2 x_1 < x_2 x 1 < x 2 ,由于区间包含关系 ( − ∞ , x 1 ] ⊂ ( − ∞ , x 2 ] (-\infty, x_1] \subset (-\infty, x_2] ( − ∞ , x 1 ] ⊂ ( − ∞ , x 2 ] ,且差集为 ( x 1 , x 2 ] (x_1, x_2] ( x 1 , x 2 ] ,由概率非负性与可加性立得:
F X ( x 2 ) − F X ( x 1 ) = P ( x 1 < X ≤ x 2 ) ≥ 0 ⟹ F X ( x 1 ) ≤ F X ( x 2 ) F_X(x_2) - F_X(x_1) = \mathbb{P}(x_1 < X \le x_2) \ge 0 \quad\Longrightarrow\quad F_X(x_1) \le F_X(x_2) F X ( x 2 ) − F X ( x 1 ) = P ( x 1 < X ≤ x 2 ) ≥ 0 ⟹ F X ( x 1 ) ≤ F X ( x 2 )
注意张颢老师的精准措辞:“单调不减——不一定是严格递增,因为在没有概率消耗的区间上它可以保持水平常数,但绝不可能往下掉!”
性质 ③:右连续性(Right-Continuity)及其集合极限证明(▶ P18 16:21–19:07 )
当分布函数在某点 x 0 x_0 x 0 处发生跳跃间断时,函数值 F X ( x 0 ) F_X(x_0) F X ( x 0 ) 究竟取在上方台阶(红点,右连续)、下方台阶(蓝点,左连续)还是中间某点?(▶ P18 16:59–18:34 )
由于我们定义 F X ( x 0 ) = P ( X ≤ x 0 ) F_X(x_0) = \mathbb{P}(X \le x_0) F X ( x 0 ) = P ( X ≤ x 0 ) 包含了右端点 x 0 x_0 x 0 ,当 ε n ↓ 0 \varepsilon_n \downarrow 0 ε n ↓ 0 (从右侧趋近于 0 0 0 )时,嵌套递减事件列 { X ≤ x 0 + ε n } \{X \le x_0 + \varepsilon_n\} { X ≤ x 0 + ε n } 的可列交集恰好包含单点 { X = x 0 } \{X = x_0\} { X = x 0 } :
⋂ n = 1 ∞ { X ≤ x 0 + ε n } = { X ≤ x 0 } → 概率连续性 lim ε ↓ 0 F X ( x 0 + ε ) = F X ( x 0 + ) = F X ( x 0 ) \bigcap_{n=1}^{\infty} \bigl\{X \le x_0 + \varepsilon_n\bigr\} = \bigl\{X \le x_0\bigr\} \quad\xrightarrow{\text{概率连续性}}\quad \lim_{\varepsilon \downarrow 0} F_X(x_0 + \varepsilon) = F_X(x_0^+ ) = F_X(x_0) n = 1 ⋂ ∞ { X ≤ x 0 + ε n } = { X ≤ x 0 } 概率连续性 ε ↓ 0 lim F X ( x 0 + ε ) = F X ( x 0 + ) = F X ( x 0 )
因此,在图像上:每一个跳跃点处,上方台阶左端点画实心点(取值在此),下方台阶右端点画空心圈——这就是“右连续”!
课堂补充(▶ P18 18:34 ) :如果把分布函数定义为 P ( X < x ) \mathbb{P}(X < x) P ( X < x ) (不含右端点,如部分前苏联教材),那它就会变成左连续;现代国际通行教材统一约定为 P ( X ≤ x ) \mathbb{P}(X \le x) P ( X ≤ x ) 右连续。
性质 ④:左极限跳跃量 Δ F X ( x 0 ) = P ( X = x 0 ) \Delta F_X(x_0) = \mathbb{P}(X = x_0) Δ F X ( x 0 ) = P ( X = x 0 ) (点质量 Mass)与第一类间断点可数性(▶ P18 19:07–20:53 & ▶ P19 00:00–03:44 )
跳跃高度等于什么?(▶ P18 19:07–20:53 )
当从左侧逼近 x 0 x_0 x 0 时,递增事件列 ⋃ n = 1 ∞ { X ≤ x 0 − 1 / n } = { X < x 0 } \bigcup_{n=1}^\infty \{X \le x_0 - 1/n\} = \{X < x_0\} ⋃ n = 1 ∞ { X ≤ x 0 − 1/ n } = { X < x 0 } ,故左极限 F X ( x 0 − ) = P ( X < x 0 ) F_X(x_0^-) = \mathbb{P}(X < x_0) F X ( x 0 − ) = P ( X < x 0 ) 。于是 x 0 x_0 x 0 处的跳跃高度(Jump Size) 恰为单点概率:
Δ F X ( x 0 ) : = F X ( x 0 ) − F X ( x 0 − ) = P ( X ≤ x 0 ) − P ( X < x 0 ) = P ( X = x 0 ) \Delta F_X(x_0) := F_X(x_0) - F_X(x_0^-) = \mathbb{P}(X \le x_0) - \mathbb{P}(X < x_0) = \mathbb{P}(X = x_0) Δ F X ( x 0 ) := F X ( x 0 ) − F X ( x 0 − ) = P ( X ≤ x 0 ) − P ( X < x 0 ) = P ( X = x 0 )
张颢老师指出(▶ P18 19:32 ):许多英文名著把跳跃点称为 Point Mass(点质量) ——借用物理密度的直觉,分布函数在 x 0 x_0 x 0 处突然跳起一截,说明单点集 { x 0 } \{x_0\} { x 0 } 上凝聚了严格大于 0 0 0 的概率质量,意味着该分布含有离散成分(Discrete Component) !
为什么间断点只能是“第一类间断点”且至多可数无穷个?(▶ P19 00:29–02:28 )
由微积分定理,单调有界函数在每一点的左极限 F X ( x 0 − ) F_X(x_0^-) F X ( x 0 − ) 与右极限 F X ( x 0 + ) F_X(x_0^+) F X ( x 0 + ) 必然双双存在(断口上下极其齐整,绝不会出现振荡发散的第二类间断点),故只能是第一类跳跃间断点 !且由于所有跳跃高度之和不能超过总概率 1 1 1 ,跳跃高度 > 1 / m > 1/m > 1/ m 的点至多只有 m m m 个,对 m = 1 , 2 , … m=1,2,\dots m = 1 , 2 , … 取可列并立知:间断点至多只有可数无穷多个!
CLASSROOM BOARD DIAGRAM · 张颢老师课堂黑板原图矢量化复原 黑板原图复原 2:分布函数 F X ( x ) F_X(x) F X ( x ) 的渐近线、单调性与右连续跳跃(▶ P18 16:59 ) 严格复原张颢老师在 ▶ P18 17:14 黑板左下角手绘的 F X ( x ) F_X(x) F X ( x ) 图像:顶部的水平渐近虚线 1 1 1 、右连续实心端点与跳跃高度 Δ F ( x 0 ) \Delta F(x_0) Δ F ( x 0 ) 。
1
0
x
Fₓ(x)
x₀
ΔF(x₀) = P(X = x₀)
上端实心:右连续 F(x₀⁺)=F(x₀)
规范性与单调性(▶ P18 15:20 ) :F X ( − ∞ ) = 0 , F X ( + ∞ ) = 1 F_X(-\infty)=0,\;F_X(+\infty)=1 F X ( − ∞ ) = 0 , F X ( + ∞ ) = 1 ;若 x 1 < x 2 x_1 < x_2 x 1 < x 2 ,由 { X ≤ x 1 } ⊂ { X ≤ x 2 } \{X\le x_1\}\subset\{X\le x_2\} { X ≤ x 1 } ⊂ { X ≤ x 2 } 得 F X ( x 1 ) ≤ F X ( x 2 ) F_X(x_1)\le F_X(x_2) F X ( x 1 ) ≤ F X ( x 2 ) (单调不减)。
右连续性证明(▶ P18 17:10 ) :当 δ n ↓ 0 \delta_n\downarrow 0 δ n ↓ 0 时,⋂ n = 1 ∞ { X ≤ x + δ n } = { X ≤ x } \bigcap_{n=1}^\infty\{X\le x+\delta_n\} = \{X\le x\} ⋂ n = 1 ∞ { X ≤ x + δ n } = { X ≤ x } ,由概率连续性得 lim δ ↓ 0 F X ( x + δ ) = F X ( x ) \lim_{\delta\downarrow 0}F_X(x+\delta)=F_X(x) lim δ ↓ 0 F X ( x + δ ) = F X ( x ) 。
跳跃度即单点质量 :左极限 F X ( x 0 − ) = P ( X < x 0 ) F_X(x_0^-)=\mathbb{P}(X<x_0) F X ( x 0 − ) = P ( X < x 0 ) ,故跳跃高度 Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) \Delta F_X(x_0)=F_X(x_0)-F_X(x_0^-)=\mathbb{P}(X=x_0) Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) 。
BLACKBOARD DERIVATION RECONSTRUCTION · 张颢老师黑板推导完整复原
推导 ① 用单调递减事件列的交集极限证明右连续性 FX (x₀⁺) = FX (x₀)
ε n ↓ 0 ⟹ { X ≤ x 0 + ε 1 } ⊃ { X ≤ x 0 + ε 2 } ⊃ ⋯ , ⋂ n = 1 ∞ { X ≤ x 0 + ε n } = { X ≤ x 0 } ⟹ lim n → ∞ F X ( x 0 + ε n ) = F X ( x 0 ) \varepsilon_n \downarrow 0 \implies \bigl\{X \le x_0 + \varepsilon_1\bigr\} \supset \bigl\{X \le x_0 + \varepsilon_2\bigr\} \supset \cdots,\quad \bigcap_{n=1}^{\infty}\bigl\{X \le x_0 + \varepsilon_n\bigr\} = \bigl\{X \le x_0\bigr\} \implies \lim_{n\to\infty} F_X(x_0+\varepsilon_n) = F_X(x_0) ε n ↓ 0 ⟹ { X ≤ x 0 + ε 1 } ⊃ { X ≤ x 0 + ε 2 } ⊃ ⋯ , n = 1 ⋂ ∞ { X ≤ x 0 + ε n } = { X ≤ x 0 } ⟹ n → ∞ lim F X ( x 0 + ε n ) = F X ( x 0 ) 对应 ▶ P18 16:21–19:07 :右连续直接源于 ≤ \le ≤ 号包含了右端点 x 0 x_0 x 0 。
推导 ② 左极限差集导出跳跃点单点概率(Point Mass)与第一类间断点性质
F X ( x 0 − ) = P ( X < x 0 ) ⟹ Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) > 0 ( 至多可数个第一类跳跃点 ) F_X(x_0^-) = \mathbb{P}(X < x_0) \quad\Longrightarrow\quad \Delta F_X(x_0) = F_X(x_0) - F_X(x_0^-) = \mathbb{P}(X = x_0) > 0 \;\;(\text{至多可数个第一类跳跃点}) F X ( x 0 − ) = P ( X < x 0 ) ⟹ Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) > 0 ( 至多可数个第一类跳跃点 ) 对应 ▶ P18 19:07 –▶ P19 02:28 :离散型分布在跳跃点之间恒为水平常数(不消耗概率),全部概率质量集中在可数个跳跃点上。
深度思辨与反例剖析 (CRITICAL INSIGHT & PITFALL)如果已知分布函数 F X ( x ) F_X(x) F X ( x ) ,如何计算半开区间 P ( a < X ≤ b ) \mathbb{P}(a < X \le b) P ( a < X ≤ b ) 、闭区间 P ( a ≤ X ≤ b ) \mathbb{P}(a \le X \le b) P ( a ≤ X ≤ b ) 与开区间 P ( a < X < b ) \mathbb{P}(a < X < b) P ( a < X < b ) ?
对于连续型随机变量,由于处处无跳跃(∀ x , P ( X = x ) = 0 \forall x,\; \mathbb{P}(X=x)=0 ∀ x , P ( X = x ) = 0 ),端点开闭毫无影响,三者全等于 F X ( b ) − F X ( a ) F_X(b) - F_X(a) F X ( b ) − F X ( a ) ;
但对于含离散跳跃点 的随机变量,端点开闭相差整整一个跳跃质量!必须严格按集合差计算:
P ( a < X ≤ b ) = F X ( b ) − F X ( a ) \mathbb{P}(a < X \le b) = F_X(b) - F_X(a) P ( a < X ≤ b ) = F X ( b ) − F X ( a ) ;
P ( a ≤ X ≤ b ) = F X ( b ) − F X ( a − ) = F X ( b ) − F X ( a ) + P ( X = a ) \mathbb{P}(a \le X \le b) = F_X(b) - F_X(a^-) = F_X(b) - F_X(a) + \mathbb{P}(X=a) P ( a ≤ X ≤ b ) = F X ( b ) − F X ( a − ) = F X ( b ) − F X ( a ) + P ( X = a ) ;
P ( a < X < b ) = F X ( b − ) − F X ( a ) = F X ( b ) − F X ( a ) − P ( X = b ) \mathbb{P}(a < X < b) = F_X(b^-) - F_X(a) = F_X(b) - F_X(a) - \mathbb{P}(X=b) P ( a < X < b ) = F X ( b − ) − F X ( a ) = F X ( b ) − F X ( a ) − P ( X = b ) 。
本节方法论沉淀 · KEY TAKEAWAYS 分布函数四大特征 :① F ( − ∞ ) = 0 , F ( + ∞ ) = 1 F(-\infty)=0,\, F(+\infty)=1 F ( − ∞ ) = 0 , F ( + ∞ ) = 1 ;② 单调不减;③ 右连续(上端实心、下端空心);④ 间断点只能是第一类跳跃间断点(至多可数个)。
跳跃高度的物理意义 :F X ( x ) F_X(x) F X ( x ) 在 x 0 x_0 x 0 处的跳跃高度 Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) \Delta F_X(x_0) = F_X(x_0) - F_X(x_0^-) Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) 精确等于单点集概率质量 P ( X = x 0 ) \mathbb{P}(X=x_0) P ( X = x 0 ) 。
标记本节已精读 3. 离散 vs 连续:概率密度 fX (x) = FX '(x)、狄拉克 δ 脉冲统一表示与“概率 vs 统计”哲学分野 剖析连续型随机变量的概率密度 fX (x) 与分布函数 FX (x) 的微积分“父子对偶”,澄清为什么连续情形下单点概率 ℙ(X=x) = 0 ≠ fX (x),并用狄拉克 δ 函数将离散阶梯 CDF 求导统一进密度积分框架;最后压轴辨析“××随机变量/分布/密度”的四层从属关系与“概率论 vs 数理统计”的本质区别。
3.1 从可数求和到连续积分:概率密度函数 f X ( x ) f_X(x) f X ( x ) 与单点零概率之谜(▶ P17 03:43–16:24 )
在 ▶ P17 03:43–06:45 ,张颢老师对比了计算实数集合 A ∈ B ( R ) A \in \mathcal{B}(\mathbb{R}) A ∈ B ( R ) 概率的两种基本情形:
可数(离散)情形(▶ P17 01:36–03:43 ) :直接利用可数可加性对单点概率求和:
P ( X ∈ A ) = ∑ x k ∈ A P ( X = x k ) \mathbb{P}(X \in A) = \sum_{x_k \in A} \mathbb{P}(X = x_k) P ( X ∈ A ) = x k ∈ A ∑ P ( X = x k )
不可数(连续)情形(▶ P17 04:43–08:27 ) :将离散求和平行延伸为实数集上的微积分定积分 ,其中的被积函数 f X ( x ) f_X(x) f X ( x ) 就定义为概率密度函数(Probability Density Function, PDF) :
P ( X ∈ A ) = ∫ A f X ( x ) d x \mathbb{P}(X \in A) = \int_{A} f_X(x)\,\mathrm{d}x P ( X ∈ A ) = ∫ A f X ( x ) d x
正如物理学中物质密度是“微小体积内的质量除以体积 lim Δ V → 0 Δ m / Δ V \lim_{\Delta V\to 0} \Delta m / \Delta V lim Δ V → 0 Δ m /Δ V ”(▶ P17 06:45 ),概率密度 f X ( x ) f_X(x) f X ( x ) 是一个反映样本点落在 x x x 附近可能性大小的局部概念 。
课堂核心警示:在连续情形下,P ( X = x ) \mathbb{P}(X = x) P ( X = x ) 等于 f X ( x ) f_X(x) f X ( x ) 吗?绝对不是!(▶ P17 08:27–14:20 )
在连续情形下,任何一个单点集的概率恒等于零 :
P ( X = x ) = ∫ x x f X ( t ) d t = 0 ≠ f X ( x ) \mathbb{P}(X = x) = \int_{x}^{x} f_X(t)\,\mathrm{d}t = 0 \;\neq\; f_X(x) P ( X = x ) = ∫ x x f X ( t ) d t = 0 = f X ( x )
为什么单点概率全为 0 0 0 ,合起来却能等于 1 1 1 ?(▶ P17 09:49–11:20 )
因为连续区间包含不可数无穷多个点 ,而概率公理只保证“可数可加性”,绝不允许对不可数个 0 0 0 直接相加 !在不可数连续空间上,唯一合法的叠加工具是积分(Integration) 。
那密度 f X ( x ) f_X(x) f X ( x ) 究竟如何反映可能性大小?(▶ P17 11:20–14:20 )
必须乘上微元长度 Δ x \Delta x Δ x !X X X 落在点 x x x 附近微小邻域 ( x , x + Δ x ] (x,\, x+\Delta x] ( x , x + Δ x ] 内的概率近似为:
P ( x < X ≤ x + Δ x ) = ∫ x x + Δ x f X ( t ) d t ≈ f X ( x ) Δ x \mathbb{P}(x < X \le x + \Delta x) = \int_{x}^{x+\Delta x} f_X(t)\,\mathrm{d}t \approx f_X(x)\,\Delta x P ( x < X ≤ x + Δ x ) = ∫ x x + Δ x f X ( t ) d t ≈ f X ( x ) Δ x
且任意合法概率密度只需满足两条基本性质(▶ P18 13:58–15:07 ):① 非负性 f X ( x ) ≥ 0 f_X(x) \ge 0 f X ( x ) ≥ 0 ;② 归一性 ∫ − ∞ + ∞ f X ( x ) d x = 1 \int_{-\infty}^{+\infty} f_X(x)\,\mathrm{d}x = 1 ∫ − ∞ + ∞ f X ( x ) d x = 1 。
3.2 F X ( x ) F_X(x) F X ( x ) 与 f X ( x ) f_X(x) f X ( x ) 的“父子关系”及离散型的狄拉克 δ \delta δ 脉冲密度(▶ P17 19:58 –▶ P18 13:58 )
微积分牛顿–莱布尼茨“父子对偶”(▶ P17 20:26 & ▶ P18 00:00–00:50 ) :
由 F X ( x ) = ∫ − ∞ x f X ( t ) d t F_X(x) = \int_{-\infty}^{x} f_X(t)\,\mathrm{d}t F X ( x ) = ∫ − ∞ x f X ( t ) d t ,张颢老师形象地称分布函数与概率密度为“父子关系(原函数与导函数关系)” :
f X ( x ) = d d x F X ( x ) = F X ′ ( x ) , P ( a < X ≤ b ) = F X ( b ) − F X ( a ) = ∫ a b f X ( x ) d x f_X(x) = \frac{\mathrm{d}}{\mathrm{d}x} F_X(x) = F_X'(x), \qquad \mathbb{P}(a < X \le b) = F_X(b) - F_X(a) = \int_{a}^{b} f_X(x)\,\mathrm{d}x f X ( x ) = d x d F X ( x ) = F X ′ ( x ) , P ( a < X ≤ b ) = F X ( b ) − F X ( a ) = ∫ a b f X ( x ) d x
两者是一块石头的两面,相生相伴,求出任何一个,另一个立刻板上钉钉!
用狄拉克 δ \delta δ 函数将离散与连续“一勺烩”(▶ P18 02:46–13:58 ) :
对于离散型随机变量,其分布函数 F X ( x ) F_X(x) F X ( x ) 是带有跳跃间断点的分段常数阶梯函数(Piecewise Constant) (▶ P18 03:48 )。虽然在古典微积分中阶梯函数在跳跃点不可导,但借用《信号与系统》中的广义函数——狄拉克 δ \delta δ 函数(Dirac Delta Function) (阶跃函数求导即为冲激脉冲 δ \delta δ ),离散随机变量同样可以写出概率密度(▶ P18 04:51–07:27 ):
f X ( x ) = ∑ k p k δ ( x − x k ) , 其中权重(脉冲高度) p k = P ( X = x k ) = Δ F X ( x k ) f_X(x) = \sum_{k} p_k\,\delta(x - x_k), \qquad \text{其中权重(脉冲高度) } p_k = \mathbb{P}(X = x_k) = \Delta F_X(x_k) f X ( x ) = k ∑ p k δ ( x − x k ) , 其中权重(脉冲高度) p k = P ( X = x k ) = Δ F X ( x k )
如此一来,“算概率”在任何情况下都统一成了对概率密度做积分 (离散时对 δ \delta δ 脉冲串积分自动退化为对单点概率求和,▶ P18 12:26–13:32 )!
3.3 全课压轴辨析:四层从属图与“概率论 vs 数理统计”的两门科学分野(▶ P19 03:44–20:46 )
在课程最后 17 分钟,张颢老师厘清了贯穿整个概率统计学科的两组重大概念:
第一组概念:“× × \times\times × × 随机变量”、“× × \times\times × × 分布”、“× × \times\times × × 密度”究竟在界定什么?(▶ P19 03:44–13:32 )
我们以后会频繁混用“高斯随机变量 / 高斯分布 / 高斯密度”、“泊松随机变量 / 泊松分布”、“指数随机变量 / 指数密度”。张颢老师重画了黑板四层结构图(▶ P19 06:35–09:40 ):
第一层(核心本源) :统计实验向样本空间 Ω \Omega Ω 各个样本点变现时的“可能性大小分配” ;
第二至四层(全部是从属品!) :样本空间 Ω \Omega Ω → \to → 实数轴映射 X ( ω ) X(\omega) X ( ω ) → \to → 分布函数 F X ( x ) F_X(x) F X ( x ) 与概率密度 f X ( x ) f_X(x) f X ( x ) 。
所谓“高斯(Gaussian)、泊松(Poisson)、二项(Binomial)、指数、伽马”,界定的全都是第一层那束“可能性大小的分布模式” !理论上张三、李四(如给老师写信的张旭东、刘子源同学,▶ P19 09:40 )谁都可以拍脑袋随便定义一种可能性分布;但历经数百年大浪淘沙,最终留在教科书和统计手册里的只有寥寥百余种典型分布 ,因为只有它们在电子、医学、生物、物理、水利、化工等无数领域中被反复验证具有最广泛的普适性(▶ P19 10:43–12:57 )!
第二组概念:概率论(Probability)vs 数理统计(Statistics)——共用一套符号的两门不同科学!(▶ P19 13:32–20:46 )
既然底层的“可能性大小分布(概率模型)”在概率论开始前就已经先验(A Priori) 呆在那里了(它既不是公理,也不是数学推导算出来的,▶ P19 15:07 ),那这个先验模型是从天上掉下来的吗?
张颢老师画出了现代数据科学的完整闭环(▶ P19 16:09–20:46 ):
生产生活实践 ⟶ 数据 (Data) → 数理统计 (Statistics) 先验概率模型 ( Ω , F , P , F X ) → 概率论 (Probability) 推理与科学决策 \text{生产生活实践} \longrightarrow \mathbf{\text{数据 (Data)}} \;\xrightarrow{\mathbf{\text{数理统计 (Statistics)}}}\; \mathbf{\text{先验概率模型 } (\Omega,\mathcal{F},\mathbb{P},F_X)} \;\xrightarrow{\mathbf{\text{概率论 (Probability)}}}\; \mathbf{\text{推理与科学决策}} 生产生活实践 ⟶ 数据 (Data) 数理统计 (Statistics) 先验概率模型 ( Ω , F , P , F X ) 概率论 (Probability) 推理与科学决策
数理统计(Statistics) :负责从海量真实数据中通过整理、分析、挖掘,向上归纳出概率模型 ;
概率论(Probability Theory) :假定概率空间 ( Ω , F , P ) (\Omega,\mathcal{F},\mathbb{P}) ( Ω , F , P ) 、随机变量映射 X X X 与分布 F X F_X F X 已经先验给定 ,在此基础上通过严密的数学演绎向下做推理与决策 。
结论(▶ P19 18:09–20:14 ) :国内很多教材名叫《概率论与数理统计》,那其实是一本书里装了两门哲学、理念与方法截然不同的科学 (尽管它们共用了 P , E , Var \mathbb{P}, \mathbb{E}, \operatorname{Var} P , E , Var 同一套符号)!本学期我们专注研究概率论 ——即在先验模型给定的前提下锻造推演工具。
BLACKBOARD DERIVATION RECONSTRUCTION · 张颢老师黑板推导完整复原
对偶 ① 分布函数 FX (x) 与概率密度 fX (x) 的父子微积分对偶及局部近似
F X ( x ) = ∫ − ∞ x f X ( t ) d t ⟺ f X ( x ) = F X ′ ( x ) , P ( X = x ) = 0 , P ( x < X ≤ x + Δ x ) ≈ f X ( x ) Δ x F_X(x) = \int_{-\infty}^{x} f_X(t)\,\mathrm{d}t \iff f_X(x) = F_X'(x), \qquad \mathbb{P}(X=x)=0,\quad \mathbb{P}(x < X \le x+\Delta x) \approx f_X(x)\,\Delta x F X ( x ) = ∫ − ∞ x f X ( t ) d t ⟺ f X ( x ) = F X ′ ( x ) , P ( X = x ) = 0 , P ( x < X ≤ x + Δ x ) ≈ f X ( x ) Δ x 对应 ▶ P17 08:27–20:53 & ▶ P18 00:00–00:50 :连续情形下单点概率恒为 0,密度值 f X ( x ) f_X(x) f X ( x ) 乘微元 Δ x \Delta x Δ x 才等于局部概率。
对偶 ② 离散阶梯分布函数的广义求导:狄拉克 δ 函数脉冲串表示
F X disc ( x ) = ∑ x k ≤ x p k → d d x f X disc ( x ) = ∑ k p k δ ( x − x k ) ( p k = Δ F X ( x k ) = P ( X = x k ) ) F_X^{\text{disc}}(x) = \sum_{x_k \le x} p_k \quad\xrightarrow{\frac{\mathrm{d}}{\mathrm{d}x}}\quad f_X^{\text{disc}}(x) = \sum_{k} p_k\,\delta(x - x_k) \quad \bigl(p_k = \Delta F_X(x_k) = \mathbb{P}(X=x_k)\bigr) F X disc ( x ) = x k ≤ x ∑ p k d x d f X disc ( x ) = k ∑ p k δ ( x − x k ) ( p k = Δ F X ( x k ) = P ( X = x k ) ) 对应 ▶ P18 02:46–07:27 :利用冲激函数 δ ( x − x k ) \delta(x-x_k) δ ( x − x k ) 将离散求和与连续积分统一为对概率密度的积分。
纲领 ③ 四层从属结构与“数据 → 统计归纳 → 先验概率模型 → 概率演绎决策”闭环
Data → 统计 (归纳) 可能性分布模型 (Gaussian / Poisson / … ) ⏟ 第 1 层本源(先验给定) → 从属量化 ( Ω , X ( ω ) , F X ( x ) , f X ( x ) ) → 概率 (演绎) Decision \text{Data} \xrightarrow{\text{统计 (归纳)}} \underbrace{\text{可能性分布模型 (Gaussian / Poisson / \dots)}}_{\text{第 1 层本源(先验给定)}} \xrightarrow{\text{从属量化}} \bigl(\Omega,\; X(\omega),\; F_X(x),\; f_X(x)\bigr) \xrightarrow{\text{概率 (演绎)}} \text{Decision} Data 统计 ( 归纳 ) 第 1 层本源(先验给定) 可能性分布模型 (Gaussian / Poisson / … ) 从属量化 ( Ω , X ( ω ) , F X ( x ) , f X ( x ) ) 概率 ( 演绎 ) Decision 对应 ▶ P19 06:35–20:46 :廓清“× × \times\times × × 随机变量/分布/密度”的本源,明确概率论与数理统计的学科边界。
深度思辨与反例剖析 (CRITICAL INSIGHT & PITFALL)既然概率密度 f X ( x ) f_X(x) f X ( x ) 代表落在 x x x 附近的可能性大小,那 f X ( x ) f_X(x) f X ( x ) 的取值能不能大于 1 1 1 ?
完全可以!这是初学者最常犯的概念错误之一:把概率密度 f X ( x ) f_X(x) f X ( x ) 误当成了概率 P ( X = x ) \mathbb{P}(X=x) P ( X = x ) (▶ P17 08:27–09:14 )。概率必须满足 0 ≤ P ( A ) ≤ 1 0 \le \mathbb{P}(A) \le 1 0 ≤ P ( A ) ≤ 1 ,但概率密度 f X ( x ) f_X(x) f X ( x ) 的量纲是“概率 / 单位长度”,只要在极窄区间 Δ x \Delta x Δ x 上的积分面积 f X ( x ) Δ x ≤ 1 f_X(x)\Delta x \le 1 f X ( x ) Δ x ≤ 1 且全轴总积分 ∫ − ∞ + ∞ f X ( x ) d x = 1 \int_{-\infty}^{+\infty} f_X(x)\,\mathrm{d}x = 1 ∫ − ∞ + ∞ f X ( x ) d x = 1 即可。例如区间 [ 0 , 0.1 ] [0, 0.1] [ 0 , 0.1 ] 上的均匀分布,其概率密度高达 f X ( x ) = 10 > 1 f_X(x) = 10 > 1 f X ( x ) = 10 > 1 ;当方差趋于 0 0 0 时,高斯密度峰值更会趋向 + ∞ +\infty + ∞ (直接逼近狄拉克 δ \delta δ 函数)!
本节方法论沉淀 · KEY TAKEAWAYS 连续单点概率为 0 :P ( X = x ) = 0 ≠ f X ( x ) \mathbb{P}(X=x)=0\neq f_X(x) P ( X = x ) = 0 = f X ( x ) ,因为实轴不可数,不能对单点用可数可加性,必须对密度 f X ( x ) f_X(x) f X ( x ) 做积分。
父子对偶与 δ \delta δ 统一 :F X ′ ( x ) = f X ( x ) F_X'(x) = f_X(x) F X ′ ( x ) = f X ( x ) ;借助 f X ( x ) = ∑ k p k δ ( x − x k ) f_X(x)=\sum_k p_k\delta(x-x_k) f X ( x ) = ∑ k p k δ ( x − x k ) ,离散求和与连续积分完美统一。
概率 vs 统计 :统计是从数据归纳出模型(Data → \to → Model),概率论是在先验模型下演绎推论与决策(Model → \to → Decision)。
标记本节已精读 CONCEPTUAL & COUNTEREXAMPLE CHECKS · 第 3 讲随堂思辨与易错反例自测
检验你是否真正掌握了可测映射 X ( ω ) X(\omega) X ( ω ) 、分布函数右连续性与概率密度对偶 先独立判断,再展开详细数学解析。每道题均紧扣张颢老师在本讲(P15–P19)课堂上的追问与经典反例。
本讲核心概念、黑板记号与中英术语对照 (4 项) 随机变量(确定性可测函数) Random Variable X: Ω → ℝ 定义在样本空间 Ω \Omega Ω 上、值域在实数轴 R \mathbb{R} R 上的确定性函数(给非数值样本点穿上“数的马甲”),满足对任意 Borel 集 A ∈ B ( R ) A\in\mathcal{B}(\mathbb{R}) A ∈ B ( R ) 都有原像 X − 1 ( A ) ∈ F X^{-1}(A)\in\mathcal{F} X − 1 ( A ) ∈ F 。
累积分布函数 Cumulative Distribution Function FX (x) 定义为 F X ( x ) = P ( X ≤ x ) F_X(x) = \mathbb{P}(X \le x) F X ( x ) = P ( X ≤ x ) ,满足 F X ( − ∞ ) = 0 , F X ( + ∞ ) = 1 F_X(-\infty)=0, F_X(+\infty)=1 F X ( − ∞ ) = 0 , F X ( + ∞ ) = 1 、单调不减与右连续性;其在 x 0 x_0 x 0 处的跳跃高度 Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) \Delta F_X(x_0) = F_X(x_0)-F_X(x_0^-) = \mathbb{P}(X=x_0) Δ F X ( x 0 ) = F X ( x 0 ) − F X ( x 0 − ) = P ( X = x 0 ) 代表单点概率质量(Point Mass)。
概率密度函数 Probability Density Function fX (x) 分布函数的导函数 f X ( x ) = F X ′ ( x ) f_X(x) = F_X'(x) f X ( x ) = F X ′ ( x ) ,满足 f X ( x ) ≥ 0 f_X(x)\ge 0 f X ( x ) ≥ 0 且 ∫ − ∞ + ∞ f X ( x ) d x = 1 \int_{-\infty}^{+\infty} f_X(x)\,\mathrm{d}x = 1 ∫ − ∞ + ∞ f X ( x ) d x = 1 。在离散情形下可借助狄拉克 δ \delta δ 函数表示为 f X ( x ) = ∑ k p k δ ( x − x k ) f_X(x) = \sum_k p_k\delta(x-x_k) f X ( x ) = ∑ k p k δ ( x − x k ) 。
概率论 vs 数理统计 Probability Theory vs. Mathematical Statistics 共用一套数学符号的两门不同科学:统计负责从实际数据中归纳出概率分布模型(Data → \to → Model),概率论则假定模型先验已知并演绎推理决策(Model → \to → Decision)。
← 上一讲 (第 2 讲) 从古典概型局限到 Kolmogorov 公理化:Vitali 不可测集、σ-代数与概率空间 下一讲 (第 4 讲) → 独立性结构与示性函数代数:两两独立 vs 相互独立、Bernstein 反例与容斥原理