当前位置：当前位置： 首页 >
为什么我还是无法理解transformer？
人气：发表时间：2025-06-25 04:55:14
不要想的太过复杂，就只有随机数生成的三个矩阵，原始输入已经通过矩阵相乘关联在三个随机数矩阵中，再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵，再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重，三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏，没有什么复杂的逻辑问题。
。
同类文章排行
- 老公每晚都想要怎么办?
- 如何看待jemalloc停止维护？
- 如何评价鸿蒙电脑无法编写其自身运行的程序？
- 吃爽了是怎样一种体验？
- Rust 未来会成为主流的编程语言吗？
- 只能选一个，你选谁？
- 越正经的女人越容易做出疯狂的事吗？
- 为什么中国很少有人使用linux？
- 有没有一款音乐播放器，能连接nas音乐，创建音乐库，自动匹配歌词封面等等？类似infuse的概念呢？
- HTTP/3 解决了什么问题，又引入了什么新问题？
最新资讯文章
- 家里想搞一个服务器，怎么才不违规？
- 如何评价高圆圆的身材算是美女类型的吗？
- 为什么玩乐器的人都不喜欢让别人碰自己的乐器？
- 如何看待伊朗最高领袖哈梅内伊 6 月 18 日发布“必须强力打击以色列，永不妥协”的声明？
- 长期使用的大佬来说说，MacOS 真的比 Windows 稳定吗？
- 为什么老秦在《文明6》中如此厉害？
- 住在一个脏乱差的家里十几年是什么感受？
- 一米二的棍子打的赢三十厘米的刀子吗？
- 为什么欧美影视喜欢露点？
- 女生被踢裆也会很疼吗？
- 如果全球都停止出口粮食，中国能否自给自足？
- 为什么说Go语言的设计是工程先进但学术落后?
- 长期使用的大佬来说说，MacOS 真的比 Windows 稳定吗？
- 如何评价「尖叫」这种饮料？
- 组装2-4人后端服务团队，选择GO还是J***a？
- 歼-20 在国际上到底是什么地位？
- 大家在做登录功能时，一般怎么做暴力破解防护？
- 请问有没有什么工具能够生成局域网的网络拓扑结构图？
- 有什么是你去了西藏才知道的事情？
- 女明星做了什么医美项目保持童颜？
