Einsia AI 推出 WorkflowArena,首个面向多智能体编排能力的评测基准

Einsia AI 旗下 Navers Lab 推出的 WorkflowArena,是行业第一个专门用来考核大模型多智能体编排能力的基准,简单说就是给 Agent 做 “领导力考试”。以前的 AI 评测大多只看任务最后能不能做完,或者提前把智能体协作流程写死,没法测试模型自己能不能动态拆分任务、分配子智能体、安排协作流程。而 WorkflowArena 的核心就是检验主 Agent 能不能自主决定要不要派子智能体、派几个、怎么分工,它不只看最终交付成果好不好,还会记录整个委派、调度的全过程,用来判断这个 Agent 的组织调度水平。这套基准一共准备了 145 个长周期任务,覆盖 8 个专业领域,研究团队拿它测试了 9 个主流大模型、一共 25 种推理配置,也发现不同模型的编排风格差别很大。

一、WorkflowArena 解决什么痛点

  • 旧基准短板:要么只评估最终结果,不看中间协作组织方式;要么协作结构是人提前写好的,模型没有自主编排空间,测不出 Agent 的调度能力。
  • 核心目标:把 “多智能体编排” 单独当成一项独立能力来打分,区分模型本身解题能力和模型组织团队的领导力。
  • 适用场景:长流程复杂任务,需要拆分成多个子任务、多个子智能体配合完成的场景,比如大型软件工程、跨模块科研项目。

二、WorkflowArena 基础参数清单

项目详情
开发主体Einsia AI,Navers Lab
任务总量145 项长程任务
覆盖 8 大领域软件工程、企业运营、科学研究、数学推导、金融、法律、内容设计、3D 制作
评测对象主流大模型 Agent
评测模型数量9 个主流前沿模型,25 种推理配置
评估方式隐藏校验器核验交付物 + 全程记录智能体委派行为,双重评估

三、评测里发现的关键结论

  1. 不存在一个模型在全部 8 个领域的多智能体编排上都最强,不同模型擅长的编排策略不一样。
  2. Claude 系列在 Claude Code 里,触发工作流的次数偏少,但每次会拉起更大规模的子智能体团队;GPT 系列在 Codex 里更喜欢频繁拆分,每次分配小规模子任务。
  3. 编排方案本身可以单独迁移复用:同样交给一个偏弱的执行模型去干活,由 Claude Opus 5.5 写出的工作流编排方案,能明显提升弱模型最终任务完成效果,证明编排能力本身是独立价值点。

四、WorkflowArena 的使用步骤

  1. 载入对应任务,任务自带初始工作空间,以及多个相互依赖的交付目标。
  2. 被测主 Agent 自主判断:要不要创建子智能体、哪些环节交给子智能体、传递哪些上下文信息。
  3. 系统自动记录全部委派、调用、中间结果交互日志。
  4. 隐藏校验器对最终产出做正确性校验,结合编排日志综合评估多智能体编排质量。
  5. 输出分数与编排策略记录,用来横向对比不同模型的 Agent 调度水平。

【相关 FAQ】

问题 1:WorkflowArena 这个多智能体编排基准,和普通 AI 任务评测基准最大区别是什么?

回答 1:普通基准大多只看任务结果,或者固定协作流程;WorkflowArena 作为多智能体编排基准,重点考核 Agent 自主动态调度子智能体、搭建可执行工作流的编排能力,会同时看交付物质量和团队组织方式。

问题 2:WorkflowArena 多智能体编排基准里面的任务都是什么类型?

回答 2:WorkflowArena 多智能体编排基准包含 145 项长程任务,覆盖软件工程、法律、金融、3D 制作等 8 大专业方向,都是需要多步骤、多角色配合才能做完的复杂任务,适合考验 Agent 编排调度能力。

问题 3:WorkflowArena 评测多智能体编排的时候,是怎么给模型打分的?

回答 3:WorkflowArena 多智能体编排基准采用双重评估,一方面由隐藏校验器检查最终产出是否合格,另一方面全程记录 Agent 对子智能体的委派、分工行为,综合判断编排方案好不好,而不是只看对错。

【参考资料】

[2026-11-10](Agent 领导力大考!Einsia AI 发布 WorkflowArena,行业首个多智能体编排基准)机器之心(网易号)

[2026-11-10](Agent 领导力大考!Einsia AI 发布 WorkflowArena,行业首个多智能体编排基准)新浪财经

[2026-11-09](WorkflowArena: Benchmarking Executable Workflow Orchestration in LLM-Based Multi-Agent Systems)arXiv

【免责声明】

本文内容仅为行业信息整理,WorkflowArena 多智能体编排基准相关数据、结论以官方论文及项目仓库为准,不构成技术选型、产品采购建议,AI 基准评测结果受模型版本、推理参数影响,评测分数不代表模型全部能力。

本文来自作者[极涡同步]投稿,不代表乌兰科技网立场,如若转载,请注明出处:https://www.wlcbnews.com/rgzn/202611/1286.html

赞 (4)

今日大家都在搜的词:

发表回复

本站作者后才能评论

评论列表(4条)

  • 极涡同步
    极涡同步 2026年11月10日

    我是乌兰科技网的签约作者“极涡同步”!

  • 极涡同步
    极涡同步 2026年11月10日

    希望本篇文章《Einsia AI 推出 WorkflowArena,首个面向多智能体编排能力的评测基准》能对你有所帮助!

  • 极涡同步
    极涡同步 2026年11月10日

    本站[乌兰科技网]内容主要涵盖:互联网行业的追踪与探索

  • 极涡同步
    极涡同步 2026年11月10日

    本文概览:Einsia AI 旗下 Navers Lab 推出的 WorkflowArena,是行业第一个专门用来考核大模型多智能体编排能力的基准,简单说就是给 Agent 做 “领导力考试”。以前的 AI 评测大多只看任务最后能不能做完,或者提前把智能体协作流程写死,没法测试模型自己能不能动态拆分任务、分配子智能体、安排协作流程。而 WorkflowArena 的核心就是检验主 Agent 能不能自主决定要不要派子智能体、派几个、怎么分工,它不只看最终交付成果好不好,还会记录整个委派、调度的全过程,用来判断这个 Agent 的组织调度水平。这套基准一共准备了 145 个长周期任务,覆盖 8 个专业领域,研究团队拿它测试了 9 个主流大模型、一共 25 种推理配置,也发现不同模型的编排风格差别很大。

联系我们

联系:143 0457 151

工作时间:周一至周五,9:30-18:30,节假日休息

关注我们