昇腾AI互动式学习路径第五阶段 结构图汇总(一)

举报
黄生 发表于 2025/06/04 12:32:31 2025/06/04
【摘要】 昇腾AI互动式学习路径https://edu.huaweicloud.com/programs/ascend_zone.html第五阶段:DeepSeek快速入门学习本学习路径对DeepSeek中MoE、MLA、MTP、FP8等核心内容进行讲解,并基于DeepSeek模型完成图谱挖掘、Agent构建等任务。通过本学习路径,学员将对DeepSeek以及R1相关理论有深刻认识,并学会如何基于De...

昇腾AI互动式学习路径
https://edu.huaweicloud.com/programs/ascend_zone.html

第五阶段:DeepSeek快速入门学习
本学习路径对DeepSeek中MoE、MLA、MTP、FP8等核心内容进行讲解,并基于DeepSeek模型完成图谱挖掘、Agent构建等任务。通过本学习路径,学员将对DeepSeek以及R1相关理论有深刻认识,并学会如何基于DeepSeek进行应用开发。

DeepSeek-V3(2024年12月26日)超越顶尖开源模型、持平顶尖闭源模型

d1.png

DeepSeek路线图

d2.png
DeepSeek-V3模型简介

d3.png
路由均衡:IB与NV link

d4.png


MLA内存压缩

d5.png
FP8低精度对比

d6.png

DeepSeekV3对比V2关键更新    

d11.png

MoE框架历史

d12.png
DeepSeekMoe架构

d13.png

多头注意力MHA(Multi-Head Attention)的计算公式

d14.png


MQA Multi-Query Attention计算公式

d15.png

【声明】本内容来自华为云开发者社区博主,不代表华为云及华为云开发者社区的观点和立场。转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。