当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
人气:发表时间:2025-06-24 23:05:11
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 你是怎么发现亲戚开始见不得你好的?
- 消息称三大运营商将于今年下半年全面重启eSIM,eSIM有哪些好处?为何此前暂停这一业务?
- 穿瑜伽裤爬山的女生会不会害羞?
- 为什么全世界无一人能实现新mac直接全功能稳定装Win 11 arm,或PC直接装macOS arm?
- 微信头像会影响第一印象吗?
- 卧推100kg做组的胸,都是啥样的。?
- 我们为什么在几年之后才听说比特币(或者bitcoin),是什么让我们无法抓住这种阶级跃层的机会?
- 如果苹果真的下架了微信的话,会发生什么?
- 微软宣布 5 月 28 日开始下架「Microsoft 远程桌面」应用,背后原因有哪些?
- 曾经的班花,现在还多少人惦记?
最新资讯文章
- 为什么腾讯云或者阿里云不让自建dns服务器?
- 系统该怎样架构才能处理实时热点数据?
- 有一个乌克兰的朋友问我,中国人凭什么能享受和平,我该怎么说?
- 中央多份重磅文件出台,密集释放「涨工资」「提高居民收入」的信号,这背后有何深意?
- 新手养鱼,养什么鱼好?
- 请各位参与了鸿蒙NEXT APP适配的开发者来谈一谈适配过程中的感受?
- Rust 使用 Result 的错误处理方式与 Golang 使用 error 的方式有什么本质区别?
- 为什么女游泳运动员看起来大部分都是平胸?
- 能够自己一个人创业的全栈web码农fullstack developer要会哪些技术?
- 如何评价“寡姐”斯嘉丽·约翰逊的身材?
- 2025 年 618,有哪些家电新物种满足了消费者的「既要又要还要」?
- PHP现在真的已经过时了吗?
- 谷歌云服务宕机导致 OpenAI、Shopify 等服务中断,此次宕机的具体技术原因是什么?
- 有个少数民族的女朋友是什么体验?
- 你亲身接触过的日本人的印象是怎样的?
- PHP现在真的已经过时了吗?
- 鱼缸有哪些寿命比较长的草推荐呢?
- 超级喜欢穿短裙正常吗?
- 北京日报点名批评“苏超”过度娱乐化,它是否管的太宽了?为什么无良媒体不会被查封取缔?
- 胸大的女孩会自卑 吗?





