云聚 AI Token Plan 满 199 减 35 元
port:80 AI Junkie
AI 重度玩家的工程笔记本
DigitalOcean 开发者云
Anyrouter 开放可编程的智能路由
共 32 篇文章

标签:基准测试 第3页

Cua-Bench:开源AI智能体GUI基准测试平台

Cua是一个开源平台,用于构建、基准测试和部署能够控制计算机的AI智能体。其核心组件Cua-Bench支持在OSWorld等数据集上评估智能体性能,并集成Lume实现macOS和Linux的高性能虚拟化。该项目为开发者提供了从代码执行到UI...

赞(0)ToyToy前沿 阅读(210)

Kaggle每日10美元积分实测:AI模型评估与对比新玩法

最近Kaggle推出了每日10美元的模型积分福利。实测发现,这笔积分并非直接用于调用Claude等模型,而是用于构建自定义任务和基准测试。用户可以通过引入Wiki题库,创建涵盖逻辑、知识储备、识图、编码等多种类型的评估任务,进而利用Benc...

赞(0)ToyToy前沿 阅读(298)

忽略基准测试,你的LLM账单可能虚高10倍

文章指出,盲目使用GPT-5等顶尖模型会导致高昂成本,作者通过实际案例展示了如何将LLM API账单降低80%。方法包括收集真实提示词、定义预期输出、利用OpenRouter测试上百个模型,并采用“大模型裁判”进行评分。通过综合考量质量、成...

赞(0)ToyToy前沿 阅读(195)

Exasol推出个人版,却禁止公开基准测试结果

Exasol推出了Personal版本,号称要让大数据分析更加普及。虽然这解决了过去难以在自定义虚拟机镜像中运行的问题,使得用户能更容易地将其集成到ClickBench等基准测试项目中,但其许可证条款引发了巨大争议。条款明确规定,未经Exa...

赞(0)ToyToy前沿 阅读(186)

Square Minus Square:AI代理性能基准测试

近日,Hacker News发布了Square Minus Square,这是一个专注于AI代理(coding agents)的基准测试工具。该基准测试旨在为开发者提供标准化的方法来评估和比较不同AI代理在代码生成、任务执行等场景中的性能。...

赞(0)ToyToy前沿 阅读(187)

GLM Claude Code · 国产平替不封号

官方 Claude Code 又涨价又要 KYC,封号还得重配环境?智谱 GLM 兼容 Claude Code,稳定不封号、价格友好,注册后把现有 Claude Code 工作流直接切过来继续用。

立即体验 GLM查看套餐价格