章节3 概述 和幻灯片展示 Lec. 3: Independence

官官方数学老师·11 页·深入(追求细节与边界)·0 次浏览·33 天前
数学大学

章节3 概述 和幻灯片展示

概率论——不确定性的科学 · 单元2:条件与独立 Unit 2: Conditioning and independenc

按 空格/→ 演示下一步

问一句
1 / 11 页

全部页面点击任意一页,跳回舞台从这页播放

数学大学

章节3 概述 和幻灯片展示

概率论——不确定性的科学 · 单元2:条件与独立 Unit 2: Conditioning and independenc

1第 1 页 · 章节3 概述 和幻灯片展示

A coin tossing example

抛硬币例题引入独立性:连续正面不影响下一次的概率。

直觉陷阱
「该出反面了」是赌徒谬误
模型答案
独立抛掷下每次正面概率恒为 1/2
2第 2 页 · A coin tossing example

Independence of two even

两事件独立的定义:P(A∩B)=P(A)P(B),即 B 的发生不改变 A 的概率。

定义
乘积式是独立的唯一标准
条件视角
P(A|B)=P(A)(B 有正概率时)
3第 3 页 · Independence of two even

Independence of event co

独立对补集封闭:A 与 B 独立,则 A 与 Bᶜ 也独立。

证明思路
用并集公式与补集公式代换
意义
独立性与表述方式(正说反说)无关
4第 4 页 · Independence of event co

Conditional independence

条件独立:给定 C 时 P(A∩B|C)=P(A|C)P(B|C),原独立不保证条件独立。

定义
在条件 C 的世界内重新检验独立性
反例警示
无条件独立且条件独立的组合都可构造反例
5第 5 页 · Conditional independence

Independence of a collec

多个事件的独立要求任意子集的交都等于概率乘积,比两两独立更强。

两两独立不足
存在两两独立但整体不独立的经典例
定义强度
全部 2ᵏ 个子集都要验乘积式
6第 6 页 · Independence of a collec

Reliability

可靠性应用:串并联系统的成功率用独立性与概率公式计算。

串联
全通才通:成功率相乘
并联
全坏才坏:失败率相乘后取补
7第 7 页 · Reliability

The King's sibling

国王的兄弟姐妹悖论:条件信息改变样本空间,直觉答案常错。

条件陷阱
「有兄弟的是国王」与「随机孩子是国王」不同
方法
列出全部等可能情形再条件化
8第 8 页 · The King's sibling

独立性自测

点击作答

A、B 概率均为 1/2 且互斥,它们独立吗?

9第 9 页 · 独立性自测

本节要点

  • ✓独立性看乘积式,不看直觉
  • ✓独立对补集封闭
  • ✓多事件独立强于两两独立
  • ✓串并联系统用独立性算可靠度
延伸主题:构造两两独立的反例算一次串并混联可靠度
10第 10 页 · 本节要点

课后思考

先自己回答,再展开参考答案——能讲出来才算真懂。

1「国王的兄弟姐妹」类问题为什么直觉总出错?

参考答案条件信息改变了样本空间的形状:不同观测方式对应的条件事件不同。正确做法是先列全部等可能情形,再明确「观测到的是哪类事件」做条件化,不能凭模糊直觉抢答。

2条件独立在机器学习里对应什么?

参考答案朴素贝叶斯的「给定类别各特征独立」就是条件独立假设:无条件时特征可能相关,但给定类别后视为独立。它是模型简化与现实的折中,也是图模型中边缺失的语义。

3“至少一对相同生日”问题为什么用反面计算更简单?

参考答案正面要求每对都不同,需逐对独立判断且相互牵连;反面「至少一对相同」在 n=23 时概率即超过 50%。用 1−(365/365)(364/365)…连乘,思路清晰且计算量小。

11第 11 页 · 课后思考