连续型分布

本文介绍连续型随机分布,表示一个区间内的事件的概率,需要记住的只有连续型均匀分布、正太分布

  • 什么是连续性均匀分布?

    • 一个均匀分布在区间[a, b]上的连续型随机变量 X

      f(n)={1ba,for a <= x < b 0,elsewheref(n)= \begin{cases} {\frac{1}{b-a}}, & \text {for a <= x < b } \\ 0, & \text{elsewhere} \end{cases}

    • 期望:E[X]=a+b2E[X]=\frac {a+b} 2 方差:V[X]=(ba)212V[X]=\frac {(b-a)^2} {12}

    • 均匀分布具有下属意义的等可能性。若 X ∼ U [a, b], 则 X 落在[a, b]内任一子区间[c, d]上的概率 P(cxd)=F(d)F(c)=cd1badx=dcbaP(c \geq x \leq d) =F(d)-F(c)=\int_c^d \frac 1 {b-a} dx=\frac {d-c} {b-a} ,表示概率只与区间[c, d]的长度有关,而与他的位置无关

  • 什么是高斯正态分布 (normal)?

    • 连续随机变量的概率密度函数(概率密度)

      f(x)=1σ2πe(12(xμσ)2)f(x)=\frac{1}{σ \sqrt {2\pi} }e^{({-\frac{1}{2} {(\frac{x-μ}{σ}})^2})}

    • 期望:μμ 方差: σ2σ^2

  • 什么是指数分布?

    • 指数分布是一种连续概率分布。指数分布可以用来表示独立随机事件发生的时间间隔,比如旅客进入机场的时间间隔、打进客服中心电话的时间间隔、中文维基百科新条目出现的时间间隔等等

      f(x;λ)={λeλx,x >= 00,x<0f(x;\lambda )= \begin{cases} {\lambda e^{- \lambda x}}, & \text {x >= 0} \\ 0, & \text{x<0}\end{cases}

    • 其中λ>0 是分布的一个参数,常被称为率参数。即每单位时间发生该事件的次数。指数分布的区间是[ 0,∞)。如果一个随机变量 X 呈指数分布,则可以写作:X ~ Exponential(λ)

    • 期望:E(X)=1λE(X)=\frac 1 {\lambda} 方差: V(X)=1λ2V(X)=\frac 1 {\lambda^2}

    • 指数函数的一个重要特征是无记忆性,这表示如果一个随机变量呈指数分布,当s,t>0时有P(T>t+s|T>t)=P(T>s)。即,如果T是某一元件的寿命,已知元件使用了t小时,它总共使用至少s+t小时的条件概率,与从开始使用时算起它使用至少s小时的概率相等

  • 什么是伽马分布?

    • 伽玛分布是统计学的一种连续概率函数。伽玛分布中的参数α,称为形状参数,β称为尺度参数 ,令XΓ(α,β)X \sim \Gamma(\alpha,\beta) ;且令λ=1β\lambda=\frac 1 \beta :即XΓ(α,1λ)X \sim \Gamma(\alpha,\frac 1 \lambda)
    • 假设随机变量X为 等到第α件事发生所需之等候时间, 分布函数为 f(x)=xα1λαe(λx)Γ(a),x>0f(x)=\frac {x^{\alpha - 1} \lambda^\alpha e^(-\lambda x)} \Gamma(a), \text x>0
    • 伽马(gamma)函数 Γ(x)={(n1)!n为正整数0tn1etdt实步为正的虚数n\Gamma(x)=\begin{cases} {(n-1)!} & \text {n为正整数} \\ \int_0^\infty{\frac {t^n-1} {e^t}dt} & \text{实步为正的虚数n} \end{cases}
    • 期望:μ=αλ\mu=\frac \alpha \lambda 方差:V(X)=αλ2V(X)=\frac \alpha {\lambda^2}
  • 什么是韦布尔分布?

    • 威布尔分布(Weibull distribution)是可靠性分析和寿命检验的理论基础
      1
      2
      3
      #1.预计将在老化期间失效的项目所占的百分比是多少?例如,预计将在8小时老化期间失效的保险丝占多大百分比?
      #2.预计在有效寿命阶段有多少次保修索赔?例如,在该轮胎的 50,000 英里有效寿命期间预计有多少次保修索赔?
      #3.预计何时会出现快速磨损?例如,应将维护定期安排在何时以防止发动机进入磨损阶段?
    • 概率密度函数(概率密度)f(x;λ,k)={kλ(xλ)k1e(x/λ)kx00x0f(x;\lambda,k)=\begin{cases} {\frac k \lambda(\frac x \lambda)^{k-1}e^{-(x/\lambda)^k}} & \text {x}\geq 0 \\ 0 & \text{x}\leq0 \end{cases}
    • 其中,x是随机变量,λ>0是比例参数(scale parameter),k>0是形状参数(shape parameter)。显然,它的累积分布函数是扩展的指数分布函数,而且,Weibull distribution与很多分布都有关系。如,当k=1,它是指数分布;k=2时,是Rayleigh distribution(瑞利分布)
    • 期望:E=λΓ(1+1k)E=\lambda\Gamma(1+\frac 1 k) 方差: V=λ2[Γ(1+2k)Γ(1+1k)2]V=\lambda^2[\Gamma(1+\frac 2 k)-\Gamma(1+\frac 1 k )^2]
  • 什么是F分布?

    • 在概率论和统计学里,F-分布是一种连续概率分布,被广泛应用于似然比率检验

    • 概率密度函数(概率密度)

      f(x;d1,d2)=(d1,x)d1d22d(d1,x+d2)(d1+d2)xB(d12,d22)f(x;d_1,d_2)=\frac {\sqrt{\frac {(d_1,x)^{d_1}{d_2}^d_2} {(d_1,x+d_2)^(d_1+d_2)}}} {x B(\frac {d_1} 2,\frac {d_2} 2)}

    • 这里 B是B函数。在很多应用中,参数 d1 和 d2 是正整数,但对于这些参数为正实数时也有定义

    • 期望:d2d22,for d22\frac{d_2}{d_2-2}, \text {for }d_2\geq2 方差 :2d22(d1+d22)d1(d22)2(d24),for d24\frac{2d_2^2(d_1+d_2-2)}{d_1(d_2-2)^2(d_2-4)}, \text {for }d_2\geq4

    • 一个F-分布的随机变量是两个卡方分布变量除以自由度的比率 U1/d1U2/d2=U1/U2d1/d2\frac{U_1/d_1}{U_2/d_2}=\frac{U_1/U_2}{d_1/d_2} , U1和U2呈卡方分布,它们的自由度(degree of freedom)分别是d1和d2,U1和U2是相互独立的

  • 什么是T分布?

    • 在概率论和统计学中,学生t-分布可简称为t分布,用于根据小样本来估计呈正态分布且方差未知的总体的均值。如果总体方差已知(例如在样本数量足够多时),则应该用正态分布来估计总体均值。它是对两个样本均值差异进行显著性测试的学生t检定的基础
    • 概率密度函数(概率密度) f(t)=Γ(ν+12)νπΓ(ν2)(1+t2ν)ν+12f(t)=\frac{\Gamma(\frac{\nu+1}{2})}{\sqrt{\nu\pi}\Gamma(\frac \nu 2)}(1+\frac{t^2}{\nu})^{-\frac{\nu+1}{2}} ,ν\nu 等于n − 1。 T的分布称为t-分布。参数 ν\nu 一般被称为自由度。Γ\Gamma 是伽玛函数
    • 期望:ν>1\nu>1 时为0,ν=1\nu=1 为定义 方差:ν>2\nu>2 , 时为νν2\frac \nu {\nu-2} ,否则无穷大
    • T的概率密度函数(概率密度)的形状类似于均值为0方差为1的正态分布,但更低更宽。随着自由度ν\nu 的增加,则越来越接近均值为0方差为1的正态分布
  • 什么是贝塔分布?

    • 在概率论中,Β分布也称贝塔分布,是指一组定义在(0,1)区间的连续概率分布,有两个参数 α , β > 0.记为XBe(α,β)X\sim Be(\alpha,\beta)
    • B分布可以看做是分布之上的分布,当你不知道一个东西的具体概率是多少时,它可以给出了所有概率出现的可能性大小
    • 概率密度函数(概率密度):f(x;α,β)=x(α1)(1x)(β1)01uα1(1u)β1duf(x;\alpha,\beta)=\frac {x^{(\alpha-1)}(1-x)^{(\beta-1)}} {\int_0^1u^{\alpha-1}(1-u)^{\beta-1}du}
    • 期望:E=αα+βE=\frac{\alpha}{\alpha+\beta} 方差: V=αβ(α+β)2(α+β+1)V=\frac{\alpha\beta}{(\alpha+\beta)^2(\alpha+\beta+1)}
  • 什么是卡方分布?

    • 卡方分布是概率论与统计学中常用的一种概率分布。k个独立的标准正态分布变量的平方和服从自由度为k的卡方分布,记为 Xχ2(k)X\sim \chi^2(k)
    • 卡方分布是一种特殊的伽玛分布,是统计推断中应用最为广泛的概率分布之一,例如假设检验和置信区间的计算
    • 概率密度函数 fk(x)=12k2Γ(k2)xk21ex2f_k(x)=\frac{\frac12\frac k2}{\Gamma(\frac k2)}x^{\frac k2-1}e^{\frac{-x}2}
    • 其中x≥0,当x≤0时fk(x)=0f_k(x)=0 。这里Γ代表Gamma函数
    • 期望:k 方差: k(129k)3\approx k(1-\frac{2}{9k})^3
  • 由卡方分布延伸出来皮尔森卡方检定的用处?

    • 样本某性质的比例分布与总体理论分布的拟合优度(例如某行政机关男女比是否符合该机关所在城镇的男女比);
    • 同一总体的两个随机变量是否独立(例如人的身高与交通违规的关联性);
    • 二或多个总体同一属性的同素性检定(意大利面店和寿司店的营业额有没有差距)。(详见皮尔森卡方检定)
  • 什么是拉普拉斯分布?

    • 在概率论与统计学中,拉普拉斯分布(Laplace distribution)是一种连续概率分布。由于它可以看作是两个不同位置的指数分布背靠背拼接在一起,所以它也叫作双指数分布

    • 两个相互独立同概率分布指数随机变量之间的差别是按照指数分布的随机时间布朗运动,所以它遵循拉普拉斯分布

    • 概率密度函数(概率密度)

      f(xμ,b)=12exp(xμb)=12b{exp(μxb),if x<μexp(xb),if xμf(x|\mu,b)=\frac{1}{2}exp(-\frac{|x-\mu|}{b})=\frac{1}{2b}\begin{cases} exp(-\frac{\mu-x}{b}), & \text{if x<}\mu \\ exp(-\frac{x-}{b}), & \text{if x}\geq\mu \end{cases}

    • μ 是位置参数,b > 0 是尺度参数。如果 μ = 0,那么,正半部分恰好是尺度为 1/2 的指数分布

    • 期望:μ\mu 方差: 2b22b^2

    • 正态分布是用相对于 μ 平均值的差的平方来表示,而拉普拉斯概率密度函数(概率密度)用相对于平均值的差的绝对值来表示。因此,拉普拉斯分布的尾部比正态分布更加平坦

    • 已知区间 (-1/2, 1/2] 中均匀分布上的随机变量 U,随机变量X=μbsgn(U)ln(12U)X=\mu-bsgn(U)ln(1-2|U|) 为参数 μ 与 b 的拉普拉斯分布