タグ
#deep-learning
2件の記事
research
アテンション、平易な言葉で
アテンションは技術的に聞こえますが、その考え方はあなたが文章を読むたびにしていることです。数式なしで、言語モデルの中で本当に何を意味するのかを解説します。
#attention#transformers#context
04-30 11:26·7 分
research
数式なしで理解するTransformerアーキテクチャ
Transformerは数式の壁として描かれがちです。それを取り払えば、残るのは一つの優雅なアイデア。すべての単語に、ほかのどの単語が重要かを決めさせるという発想です。
#transformers#architecture#attention
04-15 10:54·7 分

