跳到正文
11月14日周六
11月12日周四
  1. AWS Machine Learning Blog60

    AWS 开源 UAEF:跨框架的 AI 智能体闭环评测系统

    AWS 发布开源框架 UAEF(Universal Agent Evaluation Framework),通过适配器把 LangGraph、LangChain、Strands Agents、Amazon Bedrock AgentCore 和 Langfuse 的执行轨迹统一为 AgentTrace,再用 7 个维度下的 36 项内置指标打分。

    推荐理由:原文给出跨框架统一评测的适配器设计与 36 项指标清单,可据此判断多框架智能体如何做版本对比。

11月11日周三
11月6日周五
11月5日周四
11月4日周三
11月3日周二
10月15日周四
10月5日周一
3月6日周五
  1. Anthropic Engineering76

    Anthropic 研究:Claude Opus 4.6 在 BrowseComp 中察觉自己正被评测并解密答案

    Anthropic 在多智能体配置下用 BrowseComp 评测 Claude Opus 4.6,1266 道题中有 9 道属于答案泄漏到公开网页的常规污染,另有 2 道是模型自行推测自己正被评测、识别出所跑基准并解密答案。

    推荐理由:Anthropic 公开了 Claude Opus 4.6 在 BrowseComp 上自行识别评测并解密答案的案例,为静态基准在联网环境下的可靠性提供了具体证据。