当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
人气:发表时间:2025-06-25 00:05:17
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 北京日报点名批评“苏超”过度娱乐化,它是否管的太宽了?为什么无良媒体不会被查封取缔?
- 商业史上有哪些降维打击的经典案例?
- 台湾人对南京人有特殊情结吗?
- 全班 43 人开家长会只来了 7 位爸爸,学校称未来准备策划爸爸家长会,如何看待这一现象?
- 俗话说“女人三十如狼四十如虎”,到底是不是真的??
- 穿瑜伽裤爬山的女生会不会害羞?
- 女性为什么不普遍跟男性那样只留个几毫米或2-3厘米短发,女性不觉得长发麻烦吗?
- 为什么低个子男生更喜欢身材大很多的大女孩?
- 如何评价 Next.js?
- 如何评价腾讯元宝桌面端使用 Rust 的 Tauri 框架?
最新资讯文章
- 大连天空现罕见「窟窿云」,目击者称持续半小时,压迫感十足,窟窿云是怎么形成的?你见过吗?
- 使用Linux系统有什么优势,亮点在哪里?
- 如何评价巴黎世家官宣杨超越为品牌挚友?
- 如何评价「尖叫」这种饮料?
- 为什么程序员的电脑永远没有弹窗广告?
- 如何评价英伟达 NVIDIA 的总裁黄仁勋?
- 阿里网盘为什么没有动静了?
- 如何看待 2026QS 世界大学排名?
- 你见过身边身材最好的女生是什么样子的?
- 鱼缸有哪些寿命比较长的草推荐呢?
- 你卡过最厉害的bug是什么?
- 有谁现在正在使用苹果mac mini 吗?能分享一下使用感受不?
- MongoDB的缺点以及你为什么不使用MongoDB?
- 现在个人博客不能备案了吗?
- Swift 和同时代的其他语言比起来怎么样?
- Mac 发展那么多年结果只能剪***吗?
- 如何评价《三体2 · 黑暗森林》中四个面壁者?
- 导师给了1.4W要我给工作室买个主机,是整机还是自己配?
- 如何评价中国电科研发的JY-10防空指挥控制系统成为伊朗防空指挥系统核心?
- 女生被踢裆也会很疼吗?