Attention 为什么一定要加起来等于 1？（上）
从 Attention Sink 出发，理解归一化、Sparsemax 与门控
阅读文章A LITTLE SPACE ON THE INTERNET
Hi, I’m R1ck5.
花开堪折直须折，
莫待无花空折枝
在研究与代码之间，收集想法的碎片。
这里是一方自留地，也是一本持续生长的笔记。
Research · Code · Life
a work in progress, just like me.01 / RESEARCH
科研与探索
研究方向、论文阅读与项目记录
02 / NOTES
代码与笔记
把理解写下来，让想法可复现
03 / BLOG
博客与碎片
记录技术、生活和偶然的灵感
最近写下RECENT WRITING
全部文章文字是思考留下的脚印。