概率论里的基本概念#
随机试验满足的条件:
- 在相同的情况下能反复进行过
- 实验结果不能只有一种
- 结果不可预测
随机事件#
定义:在实验中可能发生也可能不发生的事件
基本事件,基本结果:在实验中所有可能发生的事件和结果
复合事件:由基本事件复合而成
必然事件:必然会发生的事件
不可能事件:必然不发生的事件
基本事件抽象成样本点,基本事件的集合抽象成样本空间。,从而引入集合论的概念
事件之间的关系与运算#
| 关系 | 表示 | 概率意义 |
|---|
| 包含关系 | A⊃B, | B发生则A必然发生 |
| 相等关系 | A⊂B且B⊂A | A发生导致B发生且B发生导致A发生 |
| 并(和)关系 | A∪B | 至少发生一个 |
| 积(交)关系 | A∩B=AB | A发生同时B也发生 |
| 差事件 | A−B | A发生B不发生 |
| 对立事件 | Aˉ,AC | Aˉ=S−A |
| 互斥 | A∩B=∅ | A发生B一定不发生 |
| 反包含 | A⊏B=Aˉ⊂Bˉ | |
差事件的一些恒等式:
A−B=ABˉ=A−AB=A∪B−B
:::
TIP
- 推广:n个事件互斥:A1,A2,A3...An 互斥 ⟺ 其中任意两个事件互斥
- 推广:可数个事件互斥:A1,A2,A3...An... 互斥 ⟺ 其中前n个事件互斥
- 互斥的两个事件的并运算可以简写成 A+B
对偶律:
A∪B=A∩BA∩B=A∪B对偶律的推广(德摩根定律):
i=1⋃nAi=i=1⋂Aiˉi=1⋂nAi=i=1⋃Aiˉ
几何概型#
几何概型的定义:设:试验的可能结果用一个几何区域 S表示;A 是事件对应的区域;用 m(⋅) 表示长度、面积或体积等度量。则事件 A 的概率定义为:
P(A)=m(S)m(A)几何概型的典型例题#
-
见面问题
甲乙两人约定在 0 到 T 时进行见面,先到的等待 t 事件( t≤T ),问甲乙两个人能见面的概率
solution
甲到达的时刻为 X ,乙到达的时刻为 Y ,则样本空间 S 是一个大小为 T2 的正方形。
两人若能见面则满足 ∣X−Y∣=≤t,几何意义就是直线 Y=X 两侧宽度为t内的区域面积。
S(A)=T2−(T−t)2P(A)=T2T2−(T−t)2:::
-
投针问题
线之间的宽度为d,针的长度为l,随机投针,求针与线相交的概率
solution
针落在平面上时,有两个随机变量决定与线是否相交:
- 针中心点距离线的距离:记作 x,取值范围是 [0,d/2] ,这里考虑对称性,只用最近的那一条线。
- 针与平行线的夹角:记作 θ ,取值范围 [0,π/2] ,同样是利用对称性,只考虑四分之一圆周
显然,这两个随机变量满足在定义域上均匀分布
针与线相交的条件:当且仅当针往中心点垂直于线的方向上投影的长度大于中心点到线的距离,即:
2l⋅sinθ≥x想象一下,样本空间 S 的几何区域是一个横轴是 θ∈[0,π/2] ,纵轴为 x∈[0,l/2] 的矩形,而事件 A 的几何区域是一个压扁的正弦函数下方的区域。用积分求面积
S(A)=∫02π2lsinθdθ=2lS=2l⋅2π=4πP(A)=Ss(A)=πd2l
概率的公理化定义#
一个概率模型由3部分组成:
(Ω,F,P)
-
Ω:样本空间(所有可能结果的集合)。
-
F :事件族( Ω 的子集构成的 σ -代数,保证了事件运算的封闭性)。
-
P:概率测度(一个从 F 到 [0,1] 的函数)。
概率函数 P→[0,1] 必须满足三条公理:
概率的公理化定义(Kolmogorov, 1933)
-
非负性公理 (Non-negativity)
对于任意事件 E,其概率满足:
P(E)≥0
-
规范性公理 (Normalization)
整个样本空间 Ω(必然事件)的概率为 1:
P(Ω)=1
-
可列可加性公理 (Countable Additivity)
对于任意可数个(有限或可数无限)互斥事件 E1,E2,E3,…(即 i=j 时 Ei∩Ej=∅),有:
P(i=1⋃∞Ei)=i=1∑∞P(Ei)
条件概率#
P(A∣B) 表示 B 发生的条件之下 A 发生的概率。(其中 P(B)>0)
P(A∣B)=P(B)P(AB)条件概率的性质(概率的公理化定义中的三条性质)
-
0≤P(A∣B)≤1
-
P(S∣B)=1,S 表示全集。
-
若 A1,A2 互斥,则有 P(A1∪A2∣B)=P(A1∣B)+P(A2∣B)。
概率乘法公式#
- 若 P(B)>0 ,则 P(A∣B)P(B)=P(AB)
- 推广到n-1个事件: A1,A2,A3,.An−1, 则
P(A1A2A3.An−1)=P(A1)P(A1∣A2)P(A3∣A1A2)⋅P(An∣A1A2A3⋅An−1)
全概率公式#
对于一组事件 A1,A2,A3,.An,如果这些事件两两互斥,并且 P(Ai)>0 ,对于事 B ,如果 B 满足:B⊂A1+A2+A3+.+An,则
P(B)=i=1∑nP(AiB)=i=1∑nP(Ai)P(B∣Ai)直观意义:分情况讨论,把 B 分成 n 个互斥的小事 AiB 的概率之和。 全概率也可以视作加权。
贝叶斯公式#
从一个现实案例出发:一个工厂车间三个工人的产量和次品率的表格如下:
| 工人 | 一 | 二 | 三 |
|---|
| 产率 | 50% | 30% | 20% |
| 次品率 | 1% | 2% | 3% |
记事件A为选到的零件为次品,Ai 表示这个零件由工人i生产,那么 P(A1∣A) 就表示在抽查到次品的情况下,该次品由i号工人生产的概率
P(A1∣A)=P(A)P(AA1)=∑P(Ai)P(A∣Ai)P(A1)P(A∣A1)设有一组事件 A1,A2,A3,.An ,如果这一组事件两两互斥,且 P(Ai)>0,i=0,1,2...n ,对于事件 B ,如果 P(B)>0 ,若 B⊂A1,A2,A3,.An 则
P(Ai∣B)=P(B)P(Ai)P(B∣Ai)=∑i=1nP(Ai)P(B∣Ai)P(Ai)P(B∣Ai),i=1,2,3...n其中
- P(Ai)称为先验概率
- P(Ai∣B) 称为后验概率
贝叶斯公式是已知先验概率求得后验概率的过程。
事件之间的独立性#
所谓独立性,就是一个事件发生的概率不受另一个事件的影响,同样他不发生的概率也不受另一个事件影响
形式化定义一:如果 P(A∣B)=P(A),P(B)>0,则称事件A与B相互独立。
形式化定义二:如果 P(A∩B)=P(A)P(B),则称事件A与B相互独立
拓展到多个事件的独立性:对于事件ABC三者相互独立,必须要满足四个条件:
P(AB)=P(A)P(B)P(BC)=P(B)P(C)P(AC)=P(A)P(C)P(ABC)=P(A)P(B)P(C)WARNING对于多个事件的独立性,仅有两两独立是无法判断所有事件是否相互独立。必须加上所有事件交的概率等于各个事件概率之积这个条件