跳到主要内容
赞助推荐 搬瓦工怎么选:三网直连 CN2 GIA-E
前沿哨所

DeepX宣称5瓦功耗可推理千亿参数大模型,但性能数据均来自仿真

3 分钟阅读阅读()
赞助推荐 团队协作里的 AI 办公工作台

韩国AI芯片初创公司DeepX宣称,其芯片可在低于5瓦的功耗下运行参数规模高达1000亿的大模型推理,消息引发广泛关注。然而Hacker News社区的技术讨论指出多项关键保留意见:其一,文中性能数据均来自仿真测试,而非实体芯片实测;其二,根据原文细节,性能指标所需的总体功耗约为标称值的2.7倍,即约13.5瓦,且内存部分的功耗未明确计入;其三,配套编译器同样是仿真环境下的原型产品,尚无法作为NVIDIA ISAAC等成熟方案的直接替代品;其四,5瓦功耗指标似乎仅适用于40亿参数以下的小模型,而非1000亿参数模型。另有网友担忧其在边缘设备上的实际推理速度可能偏慢。DeepX此前已推出DXM1、DXM2等边缘AI芯片,主打端侧低功耗推理市场。若相关指标最终能在量产芯片上兑现,将显著降低大模型在手机、机器人、汽车等终端设备上的部署门槛,但仿真数据与实体产品之间的差距仍待验证。

事件分析

边缘AI推理是当前芯片创业的热门赛道,英伟达Jetson系列、高通、Hailo等玩家环伺,DeepX的功耗承诺若属实将极具竞争力。但仿真数据先行是芯片初创公司的常见宣传策略,从仿真到流片再到量产通常需跨越18个月以上的验证周期,实际功耗、算力与良率往往和设计目标存在偏差。此外,百亿级参数模型的端侧推理瓶颈通常在内存带宽而非算力本身,剔除内存功耗的标称指标参考价值有限。后续值得关注的节点包括:芯片流片后的第三方实测数据、编译器工具链能否支撑主流模型迁移部署,以及首个商业化落地场景的验证情况,这些将决定其能否真正切入机器人、自动驾驶等边缘推理市场。

核心观点:边缘AI芯片的竞赛关键不在PPT参数而在流片实测,仿真数据与真实落地之间隔着整个产业化的鸿沟。

赞助推荐 一人公司 · 创业装备库
赞助推荐 一人公司 · 创业装备库

原文链接:Hacker News

赞助推荐 一键部署 AI 大模型
赞助推荐 一键部署 AI 大模型
赞(0)
未经允许不得转载:80aj » DeepX宣称5瓦功耗可推理千亿参数大模型,但性能数据均来自仿真
赞助推荐 低成本上手 Claude Code 的中转选择
赞助推荐 低成本上手 Claude Code 的中转选择
赞助推荐 一键部署 AI 大模型
赞助推荐 一键部署 AI 大模型