章节26:吸收概率和预期吸收 Lec. 26: Absorption prob

官官方数学老师·11 页·深入(追求细节与边界)·1 次浏览·33 天前
数学大学

章节26:吸收概率和预期吸

概率论——不确定性的科学 · 单元10:马尔可夫链 Unit 10: Markov chains

按 空格/→ 演示下一步

问一句
1 / 11 页

全部页面点击任意一页,跳回舞台从这页播放

数学大学

章节26:吸收概率和预期吸

概率论——不确定性的科学 · 单元10:马尔可夫链 Unit 10: Markov chains

1第 1 页 · 章节26:吸收概率和预期吸

Lecture 26 outline

本讲主题:带吸收态的马尔可夫链——被吸收的概率与期望吸收时间。

两类问题
最终被哪个吸收态吸收、多久才被吸收
方法
首步分解建立线性方程组
2第 2 页 · Lecture 26 outline

Review: Steady-state beh

复习稳态:π=πR 给出长期占比,吸收态一旦进入则永不离开。

吸收态
自转移概率为 1 的状态
稳态局限
含吸收态时长期全部质量聚在吸收态
3第 3 页 · Review: Steady-state beh

A numerical example, par

数值例题第三段:对带瞬态的链求解吸收相关量。

步骤
重排状态使吸收态靠前,分块处理
解读
瞬态部分的解给出到达各吸收态的分布
4第 4 页 · A numerical example, par

Design of a phone system

电话系统设计例:通话建立或占线,用吸收概率评估接通率。

建模
拨号过程各阶段为瞬态,接通与占线为吸收态
设计指标
接通吸收概率就是系统服务质量指标
5第 5 页 · Design of a phone system

Absorption probabilities

吸收概率方程:aᵢ = Σⱼ rᵢⱼ·aⱼ,边界为吸收态自身取 0 或 1。

首步分解
按第一步走向对所有路径求和
解法
得到瞬态态上的线性方程组
6第 6 页 · Absorption probabilities

Expected time to absorpt

期望吸收时间:tᵢ = 1 + Σⱼ rᵢⱼ·tⱼ,吸收态的 t 为 0。

首步分解
走一步消耗一个单位时间再续算
用途
评估流程平均耗时与资源占用
7第 7 页 · Expected time to absorpt

Mean first passage

首达平均时间:从状态 i 首次到达 j 的期望步数,同样用首步分解求解。

定义
任意目的地为 j 时的首次到达期望
与吸收关联
把 j 视作吸收态即可套用同一方程
8第 8 页 · Mean first passage

Gambler's ruin

赌徒破产模型:本金在 0 与 N 两条吸收界之间随机游走。

吸收概率
初始 i 时到达 N 的概率有闭式公式
公平情形
每注等概率时破产概率 = 1−i/N
P(到达N)=(1−(q/p)i)/(1−(q/p)N)(p≠q)P(到达 N) = (1−(q/p)ⁱ) / (1−(q/p)^N)(p≠q)
9第 9 页 · Gambler's ruin

本节要点

  • ✓首步分解是吸收分析的总方法
  • ✓吸收概率与吸收时间都是线性方程组
  • ✓赌徒破产:公平情形破产率 = 1−i/N
延伸主题:解一次赌徒破产完整题为某流程算平均吸收时间
10第 10 页 · 本节要点

课后思考

先自己回答,再展开参考答案——能讲出来才算真懂。

1首步分解为什么能统一解决吸收类问题?

参考答案马尔可夫性保证走完第一步后过程「从新状态重新开始」,于是所求量(吸收概率、期望时间)满足以转移概率为系数的自洽方程。加上吸收态的边界条件,问题化成线性方程组。

2赌徒破产对「公平赌博」揭示了什么?

参考答案即使每注期望为零的公平赌博,有限本金对无限庄家,破产概率仍为 1;且本金越少破产越快。随机游走的吸收分析把「久赌必输」变成精确的定量结论。

3为什么含吸收态的链不适合用稳态分布分析?

参考答案稳态把全部长期质量堆在吸收态上,其余瞬态的占比全为零——π 只告诉你「最终一定被吸收」,却回答不了被哪个吸收、平均多久。这两个问题要用首步分解的吸收概率与吸收时间方程回答。

11第 11 页 · 课后思考