https://yuiga.dev/blog/en/tags/mcmc/ Recent content in MCMC on 行李の底に収めたり[YuWd] Hugo -- gohugo.io en ©2026, All Rights Reserved Mon, 05 Sep 2022 01:18:47 +0900 https://yuiga.dev/blog/en/ja/posts/stochastic_gradient_langevine_dynamics/ Mon, 05 Sep 2022 01:18:47 +0900 Mon, 05 Sep 2022 01:18:47 +0900 https://yuiga.dev/blog/en/ja/posts/stochastic_gradient_langevine_dynamics/ はじめに MCMCの一種 目標: ある分布 $\pi(x)$からのサンプリングを行いたい Metropolis-Hastingsアルゴリズム (MH) Hamiltonian Monte Carlo (HMC) Langevin Dynamics (Metropolis-adjusted Langevin Algorithm) Stochastic Gradient Langevin Dynamics (SGLD) の順に見ていくと理解しやすい Metropolis-Hastings Metropolis-Hastingsについては既知のもとする 提案分布 $q(z)$を元に判定関数を用いて受容・棄却を行うMCMC cf. YuWd (Yuiga Wada) 数学 機械学習 MCMC post https://yuiga.dev/blog/en/ja/posts/energy_based_model/ Sat, 27 Aug 2022 17:39:54 +0900 Sat, 27 Aug 2022 17:39:54 +0900 https://yuiga.dev/blog/en/ja/posts/energy_based_model/ Energy Based Model 生成モデルによく用いられる 拡散モデルとも関係が深い 分類回帰問題についてはYour classifier is secretly an energy based model and you should treat it like oneを参照 GANやVAE同様, データ $x$は何らかの高次元確率分布 $p(x)$からサンプリングされたものと仮定する EBMでは以下のように確率分布 $p(x)$を仮定し, $E_{\theta}(\boldsym YuWd (Yuiga Wada) featured image 機械学習 MCMC 数学 post https://yuiga.dev/blog/en/ja/posts/gibbs_mulnorm/ Wed, 16 Mar 2022 00:48:40 +0900 Wed, 16 Mar 2022 00:48:40 +0900 https://yuiga.dev/blog/en/ja/posts/gibbs_mulnorm/ はじめに 先日, 研究室の勉強会で この本 のGibbs Samplingの章(9.3.4)を担当しました. 実際にpythonで実装してみたりしたので, せっかくですから備忘録程度にまとめてみました. なお, 数弱によるガバガバ数学が展開されておりますのでご了承ください. Markov連鎖 Monte Carlo法 ベクトル $\boldsymbol{x}$ が分布 $p(\boldsymbol{x})$ に従う際, 期待値 YuWd (Yuiga Wada) 統計 MCMC post