注意力机制:让字看懂上下文 文章封面

5. 注意力机制:让字看懂上下文

Q/K/V、打分、掩码、softmax、融合。整个 Transformer 的灵魂所在。

素心
57
4 分钟
素心

Written by

素心

这个人很懒

发布日期
2026/05/05
内容许可
CC BY-NC-SA 4.0

本文标题:5. 注意力机制:让字看懂上下文

永久链接

评论

认真交流,保持友善。

参与讨论

首次评论需要审核,邮箱不会公开

提交即表示愿意友善交流;基础设备信息仅用于区分访客。

5. 注意力机制:让字看懂上下文 | ??????? | 素心