为什么我还是无法理解transformer？
来源：
编辑：
时间：2025-06-24 23:05:11
不要想的太过复杂，就只有随机数生成的三个矩阵，原始输入已经通过矩阵相乘关联在三个随机数矩阵中，再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵，再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重，三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏，没有什么复杂的逻辑问题。
。
-
{dede:pagebreak/}
网友评论：
{dede:include file='ajaxfeedback.htm' /}
栏目分类
最新文章
热门文章
- 为什么 macOS 上国产软件不流氓？
- Golang与Rust哪个语言会是今后的主流？
- 为什么有的女生喜欢穿紧身牛仔裤？
- 蜂鸟音乐指控邓紫棋侵权，要求 48 小时内下架重录歌曲，邓紫棋回应「不会下架」，这一指控合理吗？
- PHP初学者，我能不能使用PHP来开发桌面应用？
- 不用CDN就没事，用阿里云CDN就被攻击刷流量，阿里云表示证明不了就要用户买单，如何看到这种行为？
- Linux里面usermod -L zhangsan命令是什么？
- 如何评价《机动战士Gundam GQuuuuuuX》第十一集?
- 为什么MacBook pro不用高刷新率的屏幕？
- 感觉鱼缸久了底下火山石里脏脏的，能彻底换水清理一遍不？