ryamadaの遺伝学・遺伝統計学メモ

2013-08-12

指数型表現の利点の確認（４）Kullback-Leibler divergence

指数型分布族フィッシャー情報量情報幾何キュムラント母関数計量接続スコア関数尤度関数最尤推定

KL divergence は $D_{KL}(\theta_1||\theta_2) = \int_{x\in \mathcal{X}} \ln{\frac{f_{\theta_1}(x)}{f_{\theta_2}(x)}}f_{\theta_1}(x) dx$
この式も指数型表現で扱うとハンドリングが楽であり、この差を残差と捉えて残差の最小化などの扱いが楽になる

はてなブログをはじめよう！

ryamada22さんは、はてなブログを使っています。あなたもはてなブログをはじめてみませんか？

はてなブログをはじめる（無料）

はてなブログとは

ryamadaの遺伝学・遺伝統計学メモ

Powered by Hatena Blog | ブログを報告する

引用をストックしました

引用するにはまずログインしてください

引用をストックできませんでした。再度お試しください

限定公開記事のため引用できません。

読者です読者をやめる読者になる読者になる