当前位置:当前位置: 首页 >
为什么我还是无法理解transformer?
文章出处:网络 浏览次数:发表时间:2025-06-25 16:15:13
不要想的太过复杂,就只有随机数生成的三个矩阵,原始输入已经通过矩阵相乘关联在三个随机数矩阵中,再通过一些代数游戏得到每个token对于整体输入序列的注意力权重矩阵,再和另外一个随机数矩阵进行线性的代数变化即可。
反向传播更新的是这三个矩阵的权重,三个矩阵的维度设计也是为了符合线性代数的运算。
总之这个就是一个巧妙的线性代数游戏,没有什么复杂的逻辑问题。
。
同类文章排行
- 如何看待伊朗议员沙赫里亚里: 我们恳求最高领袖批准使用核武器?
- 男子蛋糕被小女孩踩坏,上前理论还被其家长辱骂殴打,如果发生这种事情有比***里当事人更好的处理方法吗?
- 写业务的话,go是不是垃圾?
- MCP、function calling 这两者有什么区别?与AI Agent 是什么关系?
- 伊朗那么大却被一个小小的以色列打的无法还手?很多高层领导都被干掉了为什么?
- 如何看待越南国会通过决议 将63个省级行政单位精简至34个?这将带来什么影响?
- 如何看待同样被美国制裁,小米反诉成功,明明是小米不跪,小米却不断被黑?
- 写业务的话,go是不是垃圾?
- 为什么说微软 Win11,有苹果 macOS 的感觉?
- 为什么我觉得中国很谦虚,甚至有时候感觉中国对其他国家过分宽容,外国人却认为中国是列强呢?
最新资讯文章
- 你们学校的校花都是怎么样的?
- 前端如何设计网页?
- 为什么山姆这么受欢迎?
- 反向代理为何叫反向代理?
- 为什么vim***vim.org公开支持乌克兰?
- .NET 应该读“刀NET”还是“点NET”?
- 如果全球都停止出口粮食,中国能否自给自足?
- 为什么人到中年,很少有身材苗条的?
- 为什么不用rust重写Nginx?
- 《诛仙》作者萧鼎于近日修改《诛仙》原作并大量删去碧瑶戏份,如何看待这一行为?
- Linux 内核的系统有没有类似macOS 那样漂亮流畅的桌面环境的发行版本?
- 医院的信息科工作是怎么样的体验?
- 有没有免费的云服务器?
- 北京日报点名批评“苏超”过度娱乐化的动机是什么?
- 普通人为了一点微薄的薪水,每天忙忙碌碌到底有什么意义?
- 个人做量化,买不起专业数据库,如何获取 L2数据?
- 为什么央视不再报道洛杉矶***了?
- 可以分享你的一张背影照吗?
- 为什么小爱音箱只能播放qq音乐免费音乐?
- 做好的flask项目怎么部署到服务器,使用公网ip可访问?





