機械学習基礎理論独習

誤りがあればご指摘いただけると幸いです。数式が整うまで少し時間かかります。リンクフリーです。

勉強ログです。リンクフリーです
目次へ戻る

共役事前分布と事後分布

ベルヌーイ分布のパラメータの事後分布

ベルヌーイ分布 ベルヌーイ分布は以下のように表されるのでした。 が確率変数で、がパラメータです。ベルヌーイ分布に対数を取ったものは以下のようになります。 ベータ分布 ベータ分布は以下のように表されるのでした。 は正規化定数で、以下のように表され…

多次元ガウス分布の平均と共分散の事後分布

本記事では共分散行列 の代わりにその逆行列である精度行列 を用います。 多次元ガウス分布 多次元ガウス分布は以下のように表されるのでした。 です。 (1)を精度行列 を用いて表すと以下のようになります。(2)の式変形では を使用しました。 対数を取ってみ…

1次元ガウス分布の平均と分散の事後分布

本記事では分散 の代わりにその逆数である精度パラメータ を用います。 1次元ガウス分布 1次元ガウス分布は以下のように表されるのでした。 です。 (1)を精度パラメータ を用いて表すと以下のようになります。対数を取ってみます。 ガウス-ガンマ分布 ガウス…

多次元ガウス分布の共分散の事後分布

本記事では共分散行列 の代わりにその逆行列である精度行列 を用います。 多次元ガウス分布 多次元ガウス分布は以下のように表されるのでした。 です。 (1)を精度行列 を用いて表すと以下のようになります。(2)の式変形では を使用しました。 対数を取ってみ…

1次元ガウス分布の分散の事後分布

本記事では分散 の代わりにその逆数である精度パラメータ を用います。 1次元ガウス分布 1次元ガウス分布は以下のように表されるのでした。 です。 (1)を精度パラメータ を用いて表すと以下のようになります。対数を取ってみます。 ガンマ分布 ガンマ分布は…

多次元ガウス分布の平均の事後分布

本記事では共分散行列 の代わりにその逆行列である精度行列 を用います。 多次元ガウス分布 多次元ガウス分布は以下のように表されるのでした。 です。 (1)を精度行列 を用いて表すと以下のようになります。(2)の式変形では を使用しました。 対数を取ってみ…

1次元ガウス分布の平均の事後分布

本記事では分散 の代わりにその逆数である精度パラメータ を用います。 1次元ガウス分布 1次元ガウス分布は以下のように表されるのでした。 です。 (1)を精度パラメータ を用いて表すと以下のようになります。対数を取ってみます。 事後分布 ガウス分布に従…

カテゴリ分布のパラメータの事後分布

カテゴリ分布 カテゴリ分布は以下のように表されるのでした。 が確率変数で、がパラメータです。 カテゴリ分布に対数を取ったものは以下のようになります。例えば、すべてのに対してとおけば、さいころの出目に関する分布を表現できます。 ディレクレ分布 デ…

目次へ戻る