DeepSeek V4 遭用户吐槽:处理复杂推理时仍显乏力,MoE 架构或是瓶颈?
一位资深用户在对比测试中指出,DeepSeek V4 在面对无标准答案、约束条件复杂且隐蔽的开放性问题时,依然无法达到 Claude Opus 4.5/4.6 的水平。用户举例称,Opus 一轮即可解决的难题,DeepSeek 经七轮纠错花...
一位资深用户在对比测试中指出,DeepSeek V4 在面对无标准答案、约束条件复杂且隐蔽的开放性问题时,依然无法达到 Claude Opus 4.5/4.6 的水平。用户举例称,Opus 一轮即可解决的难题,DeepSeek 经七轮纠错花...
近日一份关于 Qwen3.6 模型的基准测试显示,在 CUDA 核心与内存带宽受限的硬件环境下,Qwen3.6-35B-A3B(MoE 混合专家模型)的推理性能显著优于 Qwen3.6-27B(Dense 稠密模型)。在模拟线上流量的固定 ...

ECS / OSS / CDN / 云数据库一站采购,常用云资源集中选配;新用户与续费均有专场优惠,适合个人开发者与小团队长期使用。
本文分享了在 Intel Arc XPU 上运行 Qwen 3.5、Gemma 4 等 AI 模型的实战经验,重点攻克了 MoE(混合专家)模型的推理乱码难题。面对大模型显存不足的挑战,作者通过自定义 SYCL 算子实现了 CPU-XPU ...
近日,有开发者在技术社区实测了阿里的一款名为“marco-mini-instruct”的大模型。该模型总参数量达17.3B,但激活参数仅为0.86B,显露出混合专家(MoE)架构的特征。令人惊讶的是,在完全不使用GPU、仅依靠纯CPU的环境...
Yuan3.0 Ultra多模态大模型正式发布并开源。该模型采用统一架构,结合视觉编码器与103层Transformer语言主干网络,基于混合专家(MoE)技术构建。通过创新的LAEP方法,模型参数规模优化至1010B,激活参数为68.8B...
AI初创公司StepFun发布了最新大模型Step 3.5 Flash,主打“快到能思考,可靠到能行动”。该模型采用混合专家(MoE)架构,拥有1960亿总参数,但推理时每个Token仅激活110亿参数,显著提升了效率。性能方面,该模型在多...
据Hugging Face Transformers代码库的最新提交,阿里通义千问Qwen 3.5系列模型发布在即。代码中最引人注目的技术更新是引入了`Qwen3_5DynamicCache`,证实新模型将支持“线性注意力”机制,这能有效处...
上海 AI 实验室(Shanghai AI Laboratory)发布了书生 Intern-S1-Pro 模型,这是目前全球开源参数规模最大的科学多模态基础模型。该模型基于混合专家架构构建,拥有 512 个专家,总参数量高达 1 万亿。然而...
国产大模型厂商阶跃星辰(StepFun)发布了新模型 Step 3.5 Flash,并登陆 OpenRouter 平台开启限时免费调用。该模型采用 MoE 架构,总参数 196B 但激活参数仅 11B,支持 256K 超长上下文。其最大亮点...