机器学习 第十四讲：GMM与EM算法
3星 · 超过75%的资源 需积分: 10 52 浏览量
2015-04-25
16:25:52
上传
评论 3
收藏 174KB PDF 举报 
THE HONG KONG POLYTECHNIC UNIVERSITY, DEPARTMENT OF EIE
Lecture Notes of Machine Learning
Lecture 14 Mixtures of Gaussian and the EM algorithm
April 11, 2015
1 MIXTURES OF GAUSSIAN
ù˜ù§·‚?Ø|^EM (Expectation-Maximization)‰VÇ—ÝO"b·‚
k˜|Ôöx
(1)
, x
(2)
,...x
(m)
,Ï•´u nsupervisedÆS¯K§¤±·‚vk?Ûy
&E"
·‚F"|^˜‡éÜ©Ùp(x
(i)
, z
(i)
) = p(x
(i)
|z
(i)
)p(z
(i)
)5[Üù êâ, Ù¥z
(i)
∼
Multinomial(φ) (φ
j
Ê 0,
P
k
j =1
φ
j
= 1,ë êφ
j
‰ Ñ V Çp(z
(i)
= j ))§ ¿ …x
(i)
|z
(i)
= j ∼
N(µ
j
,Σ
j
)§·‚4kL«z
(i)
ŒUŠ‡ê§Ïd3ù‡.¥§z˜‡Ôöx
(i)
´d
‘Å,˜‡ŠCþz
(i)
)¤§¤±x
(i)
´lk‡pd©Ù¥˜‡(dz
(i)
•«)J
Ñ5" ù‡¡•pd·Ü.§·‚•‡5¿z
(i)
´Û¹‘ÅCþ§pd·Ü
.9ëê´φ,µ,Σ§•OùCþ§·‚Œ±ïáXeLˆªµ
l(φ,µ,Σ) =
m
X
i=1
logp(x
(i)
;φ,µ,Σ)
=
m
X
i=1
log
k
X
z
(i)
=1
p(x
(i)
|z
(i)
;µ,Σ) p(z
(i)
,φ)
·‚uy§ ÏL¦ ê¦4Š•{§Ã{ùëê)§lþ¡Lˆª
Œ±wѧ‘ÅCþz
(i)
wŠ·‚x
(i)
´lk‡pd©Ù¥Ù¥˜‡)¤§XJ·‚
1
资源评论
普通网友2015-09-19下载后不能正常使用- chenguangxi12342017-12-12下载后不可使用
