相互情報量とは?定義と性質をわかりやすく解説 2026年2月18日 情報理論 2つの確率変数がどの程度「関連し合っている」かを定量的に測りたい場面は、情報理論... KLダイバージェンスエントロピー情報理論相互情報量
【機械学習】正規分布で可視化することでKL情報量を理解する 2022年11月10日 数学 機械学習を理解し使いこなす上で、KL情報量について理解することは避けては通れない... ガウス分布カルバックライブラー情報理論情報量正規分布
確率変数のエントロピーとは?確率分布における情報量まとめ 2022年7月23日 数学 確率変数$X$における確率分布を$p(x)$とした時、その確率変数のエントロピー... KLダイバージェンス情報理論情報量数学