IT之家·· 4 小时前精选AI 评分62
谷歌联合 Artificial Analysis 推出 MKA 多模态知识智能体基准,Gemini 4 Carbon 质量第二、成本约为第一名六分之一
谷歌联合 Artificial Analysis 推出 MKA 基准测试:Gemini 4 Carbon 多模态知识工作测试获第二,任务成本仅为第一名六分之一
摘要/原文摘录
谷歌联合 AI 模型评测机构 Artificial Analysis 推出多模态知识智能体基准测试 MKA,用于评估 AI 智能体处理视觉复杂文件、完成现实知识工作任务的能力。评测集包含 200 项任务,覆盖 10 个行业、83 种职业,每项任务配有专家评分标准,平均约 70 项是非判断检查项,其中事实准确性占 75%、视觉设计占 25%。
推荐理由
谷歌与 Artificial Analysis 公开 MKA 的任务构成、评分口径和成本对比,可用来观察多模态知识工作智能体的评测方式。
来源:IT之家 · ithome.com