东南大学鲲鹏昇腾科教创新孵化中心特训营(第一期)圆满举办
创始人
2025-05-01 02:40:25
0

4月25日至26日,东南大学鲲鹏昇腾科教创新孵化中心特训营(第一期)在九龙湖校区成功举办。本次活动由东南大学鲲鹏昇腾科教创新孵化中心主办,江苏鲲鹏·昇腾生态创新中心、东南大学网络与信息中心承办,围绕昇腾AI基础软硬件解决方案、大模型训练与推理技术、DeepSeek架构解析及边缘部署等核心议题,通过课程培训和实战演练共2天的培训营,为东南大学计算机及相关专业本硕博生提供了一个深度技术交流平台。活动旨在推动基于鲲鹏昇腾底座的人才生态建设,加速国产化AI技术在高校科研与产业应用中的落地。

昇腾AI全栈技术:软硬协同赋能大模型落地

昇腾产品线专家杨越洋在首日课程中,系统性地介绍了针对大模型训推场景的昇腾AI基础软硬件解决方案。他提出大模型从预训练走向了预训练+后训练,推理部署从单机走向集群,创新迭代速度加快,其中昇腾AI软硬件技术提供全场景技术支撑。硬件层面,昇腾Atlas全系服务器支持高带宽点对点通信、液冷一体化设计与盲插运维,可覆盖中心训练、边缘推理及大规模专家并行(EP)部署场景,同时异构计算架构CANN提供算子、通信等底层技术;软件层面, MindSpore框架、MindSpeed训练加速库、MindIE推理引擎及MindStudio全流程工具链,显著提升模型开发效率。杨越洋强调,昇腾通过软硬协同设计,已为企业级大模型训练、微调及行业应用提供了高性能、高可用的技术底座。

(昇腾产品线专家杨越洋)

MindSpeed加速库:突破大模型训练瓶颈

MindSpeed研发专家刘哲续从算法、算力与数据三大维度剖析了大模型发展的趋势与挑战,并强调加速套件是算力需求激增下的重点研究课题。期间他介绍了业界加速套件的现状并重点解析了MindSpeed的技术架构:底层依托昇腾NPU算力,通过通信优化、内存优化(参数副本压缩、激活重计算)、计算优化(亲和改写,计算融合)、并行优化(Swap、融合长序列、NoopLayer负载均衡)等技术,实现训练效率跃升。最后介绍了MindSpeed LLM、MM、RL共三大套件。其中,LLM针对大语言模型,支持多预制模型并提供全流程工具;MM聚焦动模态模型,模块化组件,主打高性能与模块化;RL可支持强化学习部署,提供全流程强化学习能力。

(MindSpeed研发专家刘哲续)

国产化实践:从模型对齐到多模态开发

昇腾计算工程师雷珍珍和程麟胜,分享了MindSpeed在大模型领域成果。雷珍珍介绍,MindSpeed基于昇腾生态打造分布式训练框架,能对主流大模型高效训练与微调。她还解析模型开发七大步骤,强调确保与开源框架训练结果一致的关键要点,并分享性能优化策略。程麟胜提到,MindSpeed MM是面向大规模分布式训练的昇腾多模态大模型套件,同时支持多模态生成及多模态理解,旨在为昇腾芯片提供端到端的多模态训练解决方案, 包含预置业界主流模型,数据工程,分布式训练及加速,预训练、微调、在线推理任务等特性。

MindSpeed MM具备统一架构、任务流完备、支持灵活组装二次开发、数据工程丰富、主流模型开箱即用、原生支持MindSpeed-Core加速算法等特点,可实现多模态训练全流程加速。MM套件模型迁移开发链路完备,从模型前期摸底到最后性能调优有序推进,实际模型迁移操作便捷,并预置相关易用工具辅助进行精度对齐和性能优化。MindSpeed MM的成果有力推动国产AI生态及多模态大模型技术进步,为产业应用开拓新的可能性。

(昇腾计算工程师雷珍珍)

(昇腾计算工程师程麟胜)

推理技术纵深:MindIE引擎与DeepSeek架构创新

昇腾生态技术专家焦泽昱通过三场专题报告,全面解析基于MindIE的大模型推理和DeepSeek技术原理与架构解析。专家介绍MindIE推理引擎的分层开放架构,包括ATB加速框架(优化Transformer并行策略与内存管理)、LLM组件(降低部署门槛)及服务化支持(运维监控工具)。在实战环节,专家演示了从镜像拉取、模型权重配置到服务化部署的全流程,并针对Int8量化精度、大模型蒸馏等热点问题展开研讨。

针对DeepSeek技术原理与架构解析,专家逐一剖析了DeepSeek的核心创新技术,包括DualPipe双向流水、MoE负载均衡、FP8混合精度训练兼顾效率与精度等。他特别提到,DeepSeek的开源策略“重塑行业格局”,推动行业从“百模大战”向集约化发展,其后续版本与迭代值得期待。

(昇腾生态技术专家焦泽昱)

部署实战:从云端到边缘的模型落地

江苏鲲鹏·昇腾生态创新中心高级工程师韩升原现场演示了DeepSeek模型部署全流程,通过权重量化、多机网络拓扑优化及服务化配置,团队在昇腾服务器上实现模型的高效推理。强调“部署需关注版本差异,强化学习对齐的模型更适配实际交互场景。”其分享的报错排查经验与显存计算公式,为学员提供了实用参考。

(江苏鲲鹏·昇腾生态创新中心高级工程师韩升原)

边缘智能:香橙派开发板上的轻量化创新

昇思MindSpore布道师崔花婷带领学员在昇腾开发板 OrangePi Alpro(20T)上完成Janus-Pro模型部署实战。该开发板内置昇腾AI处理器,结合MindSpore框架的动态图调试与静态图优化能力,支持CV/NLP/生成式领域典型模型及4B以下大模型的边缘端推理。布道师详解接口转换(PyTorch至MindSpore)、网络验证及性能调优步骤,并展示如何通过三行代码调用JIT编译,实现“训推一体”的轻量化开发。学员们通过实操,切身体验了在终端设备进行模型部署运行的全流程。

(MindSpore布道师崔花婷)

最后,特训营为学员们举办了成果展示与结营仪式,为学员们颁发了结课证书。东南大学网络与信息中心副主任胡轶宁总结道:“孵化中心将持续推进‘科研-教学-产业’闭环,培养具备鲲鹏昇腾原生开发能力的复合型人才。”昇腾计算技术开发团队负责人则鼓励学员投身国产AI生态建设:“从算子开发到全栈优化,每个环节都是技术攻坚的战场。”

本次特训营作为孵化中心在人才培养方面的重要实践,将持续开展。该中心自2024年11月成立以来,围绕大学计算产业前沿课题研究、课程体系建设、研究人才培养等开展合作。此次特训营的成功举办,进一步推动了校企协同育人,为产业输出高质量鲲鹏昇腾原生人才,助力孵化世界级原生科研创新成果。未来,中心将继续开展相关活动,推动人工智能技术进步与产业发展。

相关内容

热门资讯

吉因加科技冲刺港股IPO 【深圳商报讯】(记者 钟国斌)港交所12月21日披露,吉因加科技(绍兴)股份有限公司(下称吉因加科技...
2026 AI 商业中场:从原... 来源:市场资讯 (来源:晚点LatePost) 文丨江思远 2000 年,美国互联网泡沫破灭时,G...
首都航空:用“数字翅膀”赋能旅... 自2021年12月8日加入辽宁方大集团以来,新海航首都航空四年来始终以党建为引领,以服务创新为动力,...
飞荣达:公司在液冷散热领域已展... 证券日报网讯 12月22日,飞荣达在互动平台回答投资者提问时表示,公司目前在服务器、终端设备领域研发...
快手被黑灰产攻击,黑灰产已全面... 12月22日晚,快手平台多个直播间出现色情、暴力等违规内容,快手一度关停直播。对此,快手方面回应称,...
慧研智投平台引领智能投顾时代为... 慧研智投平台通过应用最前沿的科技,致力于提供精准且个性化的投资方案,推动智能投顾业务的发展。该平台利...
户外无电无网视频汇聚平台Eas... 在视频监控领域,“没电没网”的场景一直是行业痛点。如果园、鱼塘、养殖场视频监控的实现面临着独特的挑战...
百利天恒朱义:原始创新打造超级... 来源:21世纪经济报道 21世纪经济报道记者 季媛媛 韩利明 肿瘤领域始终是医药创新的热土,PD-1...
一粒稻米,如何变身“黄金救命药... 新华社北京12月23日电 12月23日,《新华每日电讯》发表题为《一粒稻米,如何变身“黄金救命药”?...
英特尔Hammer Lake处... IT之家 12 月 23 日消息,YouTube 频道 RedGamingTech(RGT)昨日(1...
团队准备休假:Windows ... 快科技12月23日消息,随着圣诞与元旦双节临近,微软Windows Insider团队也正式开启了传...
联通在线取得基于语音识别的IP... 国家知识产权局信息显示,联通在线信息科技有限公司、联通视频科技有限公司取得一项名为“基于语音识别的I...
租机器人对顾客开启夸夸模式?海... 新年里,租一台机器人在餐厅写“福”字,再让机器人开启对顾客的“夸夸模式”,送上新年祝福,这样的就餐体...
闵行这家养老机构通过市级验收! 近日,位于上海市闵行区季乐路76号的华漕镇敬老院顺利通过上海市智慧化养老院建设验收。该院以“六大智慧...
新“前端之父”来了!智谱深夜放... 从技术上线时间点来看,这也是智谱在IPO前夜放出的关键一招。那么究竟效果如何?我们也第一时间在Z.a...
大涨!特斯拉,新纪录! 来源:市场资讯 (来源:证券时报) 特斯拉股价创历史新高。 当地时间12月22日,美股三大指数集体高...
原创 绝... 中国的绝密重器曝光,美国没想到中国撕开封锁,比预想中提前了好多年。 日前,外媒称中国科学家在深圳一座...
我国5G基站总数达483万个 来源:人民日报海外版 记者22日从工业和信息化部获悉,今年前11个月,我国通信业整体运行平稳。其中,...
“创世纪计划”:美国霸权焦虑下... (来源:求是网) 转自:求是网   前不久,美国白宫签署行政命令,正式启动名为“创世纪计划”的国家级...
AI狼人杀终极决战!GPT、Q... 鹭羽 发自 凹非寺 量子位 | 公众号 QbitAI 我真栓Q了!围观了场狼人杀,看得我汗流浃背……...