AI基准测试罗生门:DeepSeek幻觉严重遭验证,小米Grok等高分被疑刷榜
近日,Artificial Analysis (AA) 的多模态科学幻觉基准测试引发社区热议。DeepSeek在该项测试中得分极低,而小米Mimo、Grok、Qwen及GLM等模型得分异常高涨,引发关于“刷分”和基准公正性的质疑。尽管高分模...
近日,Artificial Analysis (AA) 的多模态科学幻觉基准测试引发社区热议。DeepSeek在该项测试中得分极低,而小米Mimo、Grok、Qwen及GLM等模型得分异常高涨,引发关于“刷分”和基准公正性的质疑。尽管高分模...
近期,技术社区用户反馈 xAI 旗下的 Grok 模型出现了明显的性能退化现象。尽管此前该模型在 GitHub 检索和外网资料挖掘方面表现出色,但近期用户发现其回答质量显著下降,不仅检索精准度降低,还频繁出现编造虚假链接、链接与内容不匹配等...

ECS / OSS / CDN / 云数据库一站采购,常用云资源集中选配;新用户与续费均有专场优惠,适合个人开发者与小团队长期使用。
针对近期市面上出现的“GPT-5.5”模型,有技术网友设计了一套包含诺奖知识库、模型版本认知及代码推理能力的严谨测试。实测发现,通过非官方渠道(如中转站或二手账号)获取的所谓“GPT-5.5”存在严重的认知混乱和幻觉现象:它虽能回答2024...
一位开发者出于好奇,参照 MBTI 模式开发了针对 AI 模型的“SBTI 人格测试”工具。测试流程通过让 AI 读取问卷文本并按规则输出答案串来完成。在实验过程中,开发者发现了两个值得关注的技术细节:一是严重的模型幻觉,如 Codex 在...
在 Code CLI 平台针对“ChatGPT 5.4”的深度实测中发现,尽管官方宣称拥有 1M 的超大上下文窗口,但在实际高强度使用中存在严重缺陷。当上下文占用超过 40% 时,模型性能会断崖式下跌,表现出代码残缺、逻辑断裂及严重的幻觉现...
近日有开发者爆料,在使用 Claude Sonnet 模型 API 时,遭遇了令人啼笑皆非的一幕:模型竟声称自己是 DeepSeek。这一现象不仅引发了社区对大模型幻觉和身份识别机制的讨论,更揭示了当前主流 LLM 在面对特定提示词或复杂语...
文章记录了一次开发者对AI编程助手的实测对比。作者在使用Antigravity生成代码后,分别让其自查和使用美团内部的CatPawAI(底层调用Kimi-2.5)进行交叉验证。结果显示,Antigravity自查精准发现了3处逻辑偏差;而C...