原创 当AI从云端下凡:把超级大脑塞进手机芯片的硬核操作
创始人
2025-12-15 00:22:04
0

在阅读文章前,辛苦您点下“关注”,方便讨论和分享。作者定会不负众望,按时按量创作出更优质的内容

文 |小戎

哈喽,大家好,小戎这篇内容,主要来分析AI风向的转变——从追云端大模型到死磕端侧AI,工程师们正把“超级大脑”塞进小芯片里。

前两年科技圈疯传“越大越牛”,OpenAI英伟达带头搞“参数竞赛”,从1750亿卷到万亿,显卡从H100更到Blackwell搞得像“算力即正义,规模即真理”,投资人天天催问“GPT-5啥时候通关图灵测试”,仿佛多插几排显卡,云端就能蹦出个硅基生命。

AI从云端挤进水滴大芯片

但理想很丰满,现实很骨感,你喊智能音箱“关灯”,它能卡两秒后告诉你“网络崩了”,这表现连五块钱的物理开关都不如。

要是自动驾驶也这么搞,时速100公里的车瞅见障碍物,数据传云端再等指令回来,黄花菜都凉了,事故都撞完了,更别提家里摄像头、医院病历传云端,隐私早飞上天了。

所以2025年风向变了,工程师们不追云端“烧钱巨兽”了,转头死磕“端侧AI”——简单说就是把吞几千张显卡的大模型,硬塞进手机、汽车那小芯片里,还得保智商、保速度、省电费,这难度堪比“把国家图书馆塞进公文包,还得0.1秒找出某页内容”。

别慌,工程师有三把“手术刀”救场。

第一把“知识蒸馏”,让云端大模型当“老师”,把百万字资料浓缩成“学霸笔记”,再喂给端侧小模型,结果就是0.5B参数的“学渣”,在调空调、控汽车这些活儿上,能比肩百亿参数的“学霸”。

第二把“极致量化”,堪称暴力美学,大模型本来用“精装版”数据(FP16),工程师发现它抗造,直接砍成“简装版”(INT4),体积缩4倍,速度飙上去。

就像16车道高速变4车道还不堵车,就是得精细校准,不然AI容易“断片”听不懂人话。

第三把“结构剪枝”,神经网络里没用的“赘肉”剪掉,就像给大脑做瘦身,算得更快还不影响智商。

软件瘦身后,硬件也得升级,传统芯片的“计算”和“存储”是分家的,就像厨师切菜快,但每切一刀都要跑隔壁拿葱,大部分时间全在路上。

工程师都在偷偷搞“小脑子”

现在工程师搞“存算一体化”,直接把“冰箱”搬“厨房”,还给芯片搞“分工制”CPU管指挥,DSP搞降噪,NPU专门算复杂账,效率直接拉满。

更聪明的是换思路:不搞“全能AI”,专攻“专业选手”,商汤医疗不做会写代码的“AI医生”,专门让医院训练“读CT小能手”;云知声不卷通用大模型,深耕家居、医疗的小场景。

说白了,就是让AI从“全知上帝”变成“熟练工匠”,不贪多但够精,现在大家还在追Sora的特效、猜GPT-5的进度,但深圳华强北、上海张江的工程师们,正闷头把AI做小、做便宜。

真正的万物智能,不是人人连个云端“上帝脑”,而是空调、汽车、CT机都有自己的“小脑子”,不用网线也能秒响应。

结语

等几十块的芯片能跑会推理的AI,那才是智能时代的真奇点——科技不做服务器里的幽灵,要做嵌在生活里的“硬核打工人”。

相关内容

热门资讯

原创 苹... 之前有国产手机说48周、49周超越了苹果,然而正如另一家国产手机品牌那样,这回事需要讲究耐力的,如今...
互联网平台不得“亏本卖”,香港... 国家发展改革委、市场监管总局、国家网信办12月20日联合发布的《互联网平台价格行为规则》(下称《规则...
苹果公司滥用市场支配地位被意大... 来源:环球时报 本文转自【央视新闻客户端】; 当地时间12月22日,意大利反垄断机构意大利竞争与市场...
米哈游、腾讯、阿里押注,Min... 来源:市场资讯 (来源:时代财经) 本文来源:时代财经 12月21日,时代财经注意到,MiniMax...
太极股份:三引擎驱动业务转型取... 证券之星消息,太极股份(002368)12月22日在投资者关系平台上答复投资者关心的问题。 投资者提...
AI教父Hinton首爆十年前... 来源:市场资讯 (来源:新智元) 新智元报道 编辑:桃子 【新智元导读】AI界「双神会」来了!一场...
我国科学家破译锌溴液流电池长寿... 12月22日消息,我国科学家成功破解了锌溴液流电池长寿命难题, 开发出新型溴基两电子转移反应体系,使...
安培龙:发布MEMS硅基应变片... 证券之星消息,安培龙(301413)12月22日在投资者关系平台上答复投资者关心的问题。 投资者提问...
国产芯片望迎DeepSeek时... 格隆汇12月22日|12月22日,三大指数集体高开,芯片产业链多股拉升,存储和上游设备板块表现活跃。...
“AI造雪” 湾区智造入局万亿... 在深圳,一场关于冰雪产业的“热战”正在升温。南都记者日前获悉,“TCL冬日冰雪乐园”在深圳湾万象城开...
比亚迪技术研发人员涨薪,研发人... 红星资本局12月22日消息,针对“比亚迪技术研发人员涨薪”的消息,比亚迪(002594.SZ)方面向...
原创 荣... 近日,根据多家科技媒体的消息,荣耀这家智能手机厂商已经官宣,将于2025年12月26日14:30正式...
原创 欲... 观点网 12月19日,康桥悦生活公司股价迎来上市以来的最大单日涨幅,具体比例高达73.91%,当天收...
被1200万人担心做不出来的产... 消失两年,大家都以为已经凉了的游戏,突然“复活”了。 上周Drama Studios发布公告,表示他...
【一周连连看】Coursera... Hi,周末快乐。 本周全国气温略微回暖,时间飞快,2025年还有10天即将结束。在全球范围内,生成式...
《二战风云2》控盾进阶指南:攻... 手游巴士(www.shouyoubus.com)2025年12月22日:在《二战风云2》的战场博弈中...
2025数据资产管理大会在京召... 中国日报12月22日电(记者 马思)在全球数字化转型不断深化的背景下,数据作为关键生产要素与基础性战...
《无畏契约:源能行动》手游团队... IT之家 12 月 22 日消息,苹果于 12 月 4 日公布了 2025 年度 App Store...
原创 猎... 大家好,我是正在练习射箭的何二维一。 今天的攻略咱们来把全新通行证角色光翎斗罗的全玩法攻略给过一过,...
中国移动安徽公司以数字技术引领... 随着数字中国战略的深入推进,安徽省作为文化资源与旅游资源大省,正加快推进文旅产业数字化转型。中国移动...