swiglu

このトピックを指定するにはswigluと入力

articles

Trending Alltime Latest

なぜSwiGLU活性化関数がTransformerのFFNで注目されるのか？最新の大規模言語モデルを支える技術~活性化関数に興味を持った君へ

目指せ強いエンジニアを！中野哲平

3日前