https://yuiga.dev/blog/en/tags/%E7%8A%B6%E6%85%8B%E7%A9%BA%E9%96%93%E3%83%A2%E3%83%87%E3%83%AB/ Recent content in 状態空間モデル on 行李の底に収めたり[YuWd] Hugo -- gohugo.io en ©2026, All Rights Reserved Tue, 07 Mar 2023 18:44:30 +0900 https://yuiga.dev/blog/en/ja/posts/hungry_hungry_hippos_towards_language_modeling_with_state_space_models/ Tue, 07 Mar 2023 18:44:30 +0900 Tue, 07 Mar 2023 18:44:30 +0900 https://yuiga.dev/blog/en/ja/posts/hungry_hungry_hippos_towards_language_modeling_with_state_space_models/ この度，SONY様のnnablaチャンネルにH3の解説動画を寄稿しました． 本記事ではなく動画の視聴の方を推奨します． 概要 ICLR23 状態空間モデル(state-space model; SSM)は様々なモダリティにおいて有用性が検証されてきたが，未だ言語系においては確認できていない． また，SSMは $\mathcal{O}(L)$であるにも拘ら YuWd (Yuiga Wada) featured image 論文 状態空間モデル