HelloAI
🏷️ 标签

#Attention

共找到 3 条相关内容： 2 篇学习路径 1 篇论文

📚 学习路径

L3
注意力机制详解：从直觉到完整推导
Attention is all you need. 这一篇带你从"它到底在干嘛"到"它的每行公式"，一次性吃透 Transformer 的核心。
 L3
注意力变体：Multi-Head / Cross / Sparse / Linear
Self-Attention 之后还有什么？讲清楚现代 Transformer 各种注意力家族成员。

📑 论文精读

2017
Attention Is All You Need
提出 Transformer 架构——完全抛弃 RNN，只用注意力机制。这篇 8 页的论文催生了今天所有大模型。被引 12 万+。
🏆
← 回到所有标签