返回热点榜
agent热度 50.3°

AI 聚合热点事件 · 2026/11/11

DeepMind 发布 MKA 基准 评估智能体专业视觉任务能力

4 篇收录报道3 家独立信源交叉印证持续跟踪至 2026/11/11 06:48:50
全景综述与最新动态
3 家信源交叉印证

Google DeepMind 联合 Artificial Analysis 正式发布多模态知识智能体基准 MKA,旨在评估 AI 智能体在真实专业视觉文件上的知识工作能力。该基准包含 200 个来自 10 个行业的私有真实任务,要求智能体阅读建筑图纸、工程示意图、临床扫描等复杂视觉输入,并产出幻灯片、表格、报告等交付物,填补了现有评测对蓝图交叉比对、科学图表阅读等专业场景的空白。

MKA 采用 Climb 与 Regression 双轨专家评分标准,每题平均约 70 条加权准则,强调输入的真实视觉复杂度与领域特异性,而非简化合成数据。评测结果显示,Claude Sonnet 5.5 在医疗等领域领先,但在法律与政府领域优势微弱;Gemini 4 Carbon 排名第二,单任务平均成本仅为榜首模型的六分之一,展现出显著的性价比优势。

该基准的推出标志着多模态智能体评测从通用能力向垂直专业场景的深化,为开发者提供了更贴近实际工作流的衡量工具。随着 AI 智能体在知识工作领域的渗透,MKA 有望成为行业标准,推动模型在视觉理解、跨领域推理和交付物生成等方面的持续优化,并影响企业选型与成本效益的权衡。

最新动向/MKA 基准已接入 Artificial Analysis 平台,首批评测结果显示 Claude Sonnet 5.5 在医疗等领域领先,Gemini 4 Carbon 以六分之一成本位居第二。该基准强调真实视觉复杂度与领域特异性,后续将扩展更多行业任务并动态更新评分准则。

逐小时热度走势

12 个完整观测小时
当前
50.3
峰值
58.807:00
近 24h 变化
–

曲线只比较全程持续完整观测的同一批信源;缺口小时数据已插值平滑,保持趋势连续。

报道时间线

共 4 篇 · 最新优先
  1. IT之家 · 智能时代T2·78 分

    谷歌联合 Artificial Analysis 发布 MKA 多模态智能体基准

    原标题:谷歌联合 Artificial Analysis 推出 MKA 基准测试:Gemini 4 Carbon 多模态知识工作测试获第二,任务成本仅为第一名六分之一

    • MKA 含 200 项任务,覆盖 10 个行业 83 种职业,每项任务对标专家 3 至 8 小时工作量
    • 评分标准平均约 70 项检查,事实准确性占 75%、视觉设计占 25%,自动评审与专家一致率 96%
    • 所有模型统一运行于开源框架 Stirrup,Gemini 4 Carbon 排名第二但单任务成本仅为榜首约六分之一
  2. Artificial AnalysisT1·62 分

    谷歌 DeepMind 发布 MKA 多模态知识智能体基准

    原标题:Multimodal Knowledge Agent (MKA) benchmark: testing knowledge work capabilities with complex visual files

    • MKA 包含 200 个覆盖 10 个行业的私有真实视觉任务
    • 任务要求从图纸、扫描件等密集视觉输入产出幻灯片、表格、报告等交付物
    • 基准强调视觉复杂度与领域特异性,而非简化合成输入
  3. Artificial Analysis (@ArtificialAnlys)T1·58 分

    DeepMind 与 Artificial Analysis 联合发布 MKA 多模态智能体基准

    原标题:Great to partner with @GoogleDeepMind in bringing MKA Benchmark to Artificial Analysis

    • MKA 聚焦蓝图比对、科学图表阅读等真实专业视觉任务,区别于纯文本评测
    • Gemini 4 Carbon 排名第二,单任务平均成本仅为榜首模型的 1/6
    • 基准由 DeepMind 与 Artificial Analysis 联合构建,结果已接入 Artificial Analysis 平台
  4. Artificial Analysis (@ArtificialAnlys)T1·72 分

    Google DeepMind 发布 MKA 多模态知识智能体基准

    原标题:We’ve partnered with Google DeepMind to launch their Multimodal Knowledge Agent (MKA) evaluation, a ...

    • MKA 包含 200 个来自 10 个行业的私有真实视觉任务,输入文件必须具备真实视觉复杂度且为完成任务所必需
    • 评分采用 Climb 与 Regression 双轨专家准则,每题平均约 70 条加权标准
    • Claude Sonnet 5.5 在医疗等领域领先,法律与政府领域优势微弱