当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
文章出处:网络 人气:发表时间:2025-06-24 21:10:11
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 有没有一款好用的,可以识别表格的OCR?
- 你曾看到空乘做过的最傻的事情是什么?
- 为什么这次以色列打伊朗,网上声讨的人少了,反而都是嘲笑调侃伊朗?
- 全班 43 人开家长会只来了 7 位爸爸,学校称未来准备策划爸爸家长会,如何看待这一现象?
- 你们在公司是怎么使用k8s和docker的?
- 中央多份重磅文件出台,密集释放「涨工资」「提高居民收入」的信号,这背后有何深意?
- 国产手机AI「好用」的背后,是技术差距还是文化差异?
- TVB的哪些「神剧」放到今天看,同样会让人直呼精彩?
- 5499元的iPhone16Pro 16号晚 8 点开抢,苹果耳机也能用88VIP券了,有哪些攻略?
- 伊朗和以色列为什么此时爆发冲突?背后有哪些深层原因?
最新资讯文章
- 我的世界怎么租一个四个人的服务器?
- 宝宝频繁夜醒,试过多种方法仍不见改善,到底是什么原因?该如何让宝宝拥有好睡眠?
- 你敢晒出你自己的照片吗?
- 用天猫苹果惊喜券3000不到入iPad,这波叠加九折券是入手的好机会吗?还有什么能入?
- 造一艘航母有多难?
- 女生穿超短裙就是为了给别人看吗?
- 如何评价思源笔记?
- 如何评价高圆圆的身材算是美女类型的吗?
- Rust 使用 Result 的错误处理方式与 Golang 使用 error 的方式有什么本质区别?
- 全班 43 人开家长会只来了 7 位爸爸,学校称未来准备策划爸爸家长会,如何看待这一现象?
- 中国外交部及有关使领馆正迅速组织撤离在以、伊的中国公民,目前当地情况如何?
- 如何看待《剑星》已登顶 Steam 全球热销榜?
- 如何评价字节跳动开源的 Netpoll?
- 大街上看到大白腿,忍不住瞄了两眼,算不算不尊重女性?
- systemd吞并了什么?






关注公众微信号
移动端,扫扫更精彩