跳到正文

#Microsoft

今日 2 条
今天10月13日周二
10月6日周二
  1. Hacker News:AI 热帖72

    TasteVal 论文提出 AI 实验研究品味基准,Opus 5.5 超过人类专家基线

    P-Zero Research 发布 TasteVal,用 8 个前沿 AI 研发任务衡量模型在固定问题下迭代设计实验并解读结果的能力。评测以达到人类专家分数所需实验计算为指标,由固定编码智能体在单张 H100 上执行,单次运行上限为 40 GPU-hours 或 120 小时墙钟时间,人类基线来自 24 名专家。

  2. elvis54

    Microsoft 等机构的论文提出 CorpusMap,提前解析文档集合中的重复实体,并为每个实体建立链接所有相关文档的页面。智能体可沿实体跳转查找关联证据,原始文档保持不变;在 7 个模型和 3 个基准上,答案质量提升 6.4 至 11.7 分,输入 token 减少 34% 至 57%。该地图无需 LLM 调用即可构建,并能随新文档加入更新。论文:https://arxiv.org/abs/2609.37226

    引用DAIR.AI@dair_ai

    Banger paper from Microsoft and colleagues. If you run agents that search a large document collection, this one is worth your time. (bookmark it) They introduce CorpusMap, which resolves recurring entities across the collection in advance and gives each entity a page that links to every document that mentions it. The original documents stay in place. The agent reads a document, follows an entity to related documents, and avoids searching for the same evidence again. Across 7 models and three benchmarks, answer quality goes up 6.4 to 11.7 points while input tokens drop 34% to 57%. It also beats an LLM Wiki layer and three other navigation layers. The map can be built without LLM calls and updated as new documents arrive. Paper: https://arxiv.org/abs/2609.37226 Chat with Paper: https://academy.dair.ai/papers/follow-the-entities-a-corpus-map-for-agentic-search-2609.37226

  3. GitHub Blog · AI & ML62

    GitHub 发布开放 AI 代码审查基准 ReviewBench

    GitHub 发布开放 AI 代码审查离线基准 ReviewBench,研究预览版已上线,可用于比较代码审查智能体并接入自有系统。基准基于 103.9M 个 GitHub pull request 的分布构建,包含 187 个公开仓库中的 219 个 pull request、覆盖 19 种语言,并提供多来源 golden set、严重度和类别标注。

    推荐理由:原文说明了基准语料、标注流程和接入方式,适合用来理解代码审查智能体应如何做可复现评测。

10月5日周一
10月4日周日
  1. Hugging Face Blog78

    Microsoft ThinkingBox 登陆 Hugging Face,用数据库状态评测 AI 智能体

    Microsoft 与 Hugging Face 发布 ThinkingBox 智能体沙箱及 ThinkingBox-Bench,基准包含 507 个有状态业务工作流,每个任务运行 20 次,并通过隔离 MCP 工具会话检查最终后端状态与副作用。

    推荐理由:ThinkingBox 用后端最终状态和副作用判定智能体任务成败,并通过 20 次重复运行区分单次能力与稳定可靠性。

10月2日周五
9月28日周一
9月21日周一
  1. Microsoft Research70

    Microsoft Research 在 Nature 发表 RetroChimera 逆合成模型并开源实现与权重

    Microsoft Research 发表于 Nature 的 RetroChimera 是一个小分子逆合成预测框架,可自动提出高质量合成路线。它结合基于 Transformer 的 R-SMILES 2 与基于 GNN 的 NeuralLoc,并用 learning-to-rank 聚合两类互补预测。

    推荐理由:文章解释了双模型集成与学习排序的设计思路,并给出专家盲测结果,可帮助理解 AI 如何辅助小分子逆合成规划。

8月13日周四
8月12日周三
7月31日周五
  1. Microsoft Research68

    Microsoft Research 发布 Echoverse:面向计算机使用智能体的深度可演化训练环境

    Microsoft Research 发布 Echoverse,构建10个深度领域世界和2个能力世界,用于训练计算机使用智能体,并开放其中4个世界的代码、数据和 grounded graders。

    推荐理由:文中用深浅环境对照和9B模型训练结果,说明高保真、可验证的交互环境对计算机使用智能体训练的实际影响。