EMアルゴリズム の記事一覧

線形動的システムのパラメータをEMアルゴリズムで推定する

カルマンフィルタ リング問題に代表されるような、線形動的システム(Linear Dynamical System)のパラメータをEMアルゴリズムで推定してみます。 やってる内容そのものは、「Parameter Estim […]

混合ガウスモデル(GMM)でクラスタリングを行う

混合ガウスモデル(Gaussian Mixture Model, GMM)は、教師なしの分類アルゴリズムであり、クラスタリングの手法の1つです。他のクラスタリングのアルゴリズムとしてk-meansがありますが、k-mea […]

【機械学習】EMアルゴリズムをゼロから理解する

EMアルゴリズム(expectation maximization algorithm)は、潜在変数を有する確率モデルのパラメータの最尤推定値を求めるための近似的アルゴリズムです。 一般的に、潜在変数を仮定するモデルでは […]

混合ベルヌーイ分布とEMアルゴリズムでMNISTのクラスタリング

PRMLの第9章に、EMアルゴリズムの適応対象として、混合ベルヌーイ分布(Bernoulli Mixture Models)を紹介しています。混合ベルヌーイ分布は、EMアルゴリズムを勉強する際に非常に有用な応用事例なので […]