ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

机器学习中的数学——常用概率分布(十一):狄利克雷分布(Dirichlet分布)

2021-10-04 19:06:36  阅读:365  来源: 互联网

标签:Dirichlet frac 狄利克 概率分布 mu xi alpha hat Gamma


狄利克雷分布是关于一组 d d d个连续变量 x i ∈ [ 0 , 1 ] x_i\in[0, 1] xi​∈[0,1]的概率分布, ∑ i x i = 1 \sum_ix_i=1 ∑i​xi​=1。令 μ = ( μ 1 , μ 2 , ⋯   , μ d ) \mu=(\mu_1, \mu_2, \cdots, \mu_d) μ=(μ1​,μ2​,⋯,μd​),参数 α = ( α 1 , α 2 , ⋯   , α d ) \alpha=(\alpha_1, \alpha_2, \cdots, \alpha_d) α=(α1​,α2​,⋯,αd​),其中 α i > 0 \alpha_i>0 αi​>0且 α ^ = ∑ i α i \hat{\alpha}=\sum_i\alpha_i α^=∑i​αi​。

D i r ( x ∣ α ) = Γ ( α ^ ) Γ ( α 1 ) Γ ( α 2 ) ⋯ Γ ( α i ) ∏ i = 1 d x i α i − 1 Dir(x|\alpha)=\frac{\Gamma(\hat{\alpha})}{\Gamma(\alpha_1)\Gamma(\alpha_2)\cdots\Gamma(\alpha_i)}\prod_{i=1}^dx_i^{\alpha_i-1} Dir(x∣α)=Γ(α1​)Γ(α2​)⋯Γ(αi​)Γ(α^)​i=1∏d​xiαi​−1​

狄利克雷分布有如下性质:

  • E [ x i ] = α i α ^ E[x_i]=\frac{\alpha_i}{\hat{\alpha}} E[xi​]=α^αi​​
  • V a r ( x i ) = α i ( α ^ − α i ) α ^ 2 ( α ^ + 1 ) Var(x_i)=\frac{\alpha_i(\hat{\alpha}-\alpha_i)}{\hat{\alpha}^2(\hat{\alpha}+1)} Var(xi​)=α^2(α^+1)αi​(α^−αi​)​
  • C o v ( x i , x j ) = α i α j α ^ 2 ( α ^ + 1 ) Cov(x_i, x_j)=\frac{\alpha_i\alpha_j}{\hat{\alpha}^2(\hat{\alpha}+1)} Cov(xi​,xj​)=α^2(α^+1)αi​αj​​

当 d = 2 d=2 d=2时,狄利克雷分布退化为贝塔分布。

标签:Dirichlet,frac,狄利克,概率分布,mu,xi,alpha,hat,Gamma
来源: https://blog.csdn.net/hy592070616/article/details/120606649

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有