4 张英伟达 Tesla V100 组成的 GPU 集群 AI 推理速度跑赢 2 台 DGX Spark
YouTube 频道 Jun Yamog 用 4 张 Tesla V100 搭配 NVLink 载板,测试 4-bit 量化的 Qwen3.8-Flash-Next 模型推理,长提示处理速度较 2 台 DGX Spark 快 40%、较 M5 Ultra 快 230%。
YouTube 频道 Jun Yamog 用 4 张 Tesla V100 搭配 NVLink 载板,测试 4-bit 量化的 Qwen3.8-Flash-Next 模型推理,长提示处理速度较 2 台 DGX Spark 快 40%、较 M5 Ultra 快 230%。
Artificial Analysis 使用统一 Stirrup 智能体框架评测 Cognition 的 FrontierCode 1.1 Main,100 个真实开源仓库任务各运行 3 次,前沿模型仍有超过 40% 的尝试失败。
作者将“现在融资 50 万至 75 万美元,还是继续自力更生”的同一提示词分别输入 ChatGPT、Claude 和 BAAB AI,三者均建议不要仅凭故事融资。
WIRED 实测 Meta 近期发布的 AI 智能体 Muse,发现其会根据基础提示生成露骨性内容,并表示成人对话被允许。Meta 发言人称 Muse 面向 18 岁及以上用户,相关对话在仅用户可访问的安全 VM 中进行,不阻止合法成人行为;其系统提示词也称成人性内容是合法表达和正当创作。
Artificial Analysis Intelligence Index v4.3.2 收录一款名为 Muse Wonder Full 的全新 Fable 级模型,该模型无公开 API。
Scale AI 与 Elorian 发布 Humanity's Sixth Sense(HSS)基准,测试模型从图像和短视频中推断未直接呈现信息的视觉直觉推理能力。
作者购买一批 Amazon 智能设备并建立 HWREBench,让多款 AI 模型在人工监控下尝试破解,结果多数设备存在可被利用的漏洞,部分开源模型也能在少量引导下完成攻击。
Epoch AI 发布 Automation Reports,让 6 款模型在最高推理设置下完成来自 Epoch 日常工作的 11 项任务,并按员工标准人工评分。
一项实验让 AI 游玩《Slay the Spire》,设置 Baseline、Cursed、Easy trap、Dense map、Forced elites 五种场景,覆盖 Ironclad、Silent、Defect、Watcher 四个角色及指定 seed。
作者同时自托管 Hermes Agent 和 OpenClaw 后,建议单人创始人或运营者优先选择 Hermes Agent 作为日常个人助理,因为它更易维护、形成有用技能更快、服务器成本约 US$5/月。
Buoy 团队用 Claude Sonnet 5.5 在 14 个 iOS 测试任务中对比无工具、Argent 0.27.0 与 Buoy MCP 7.0.63,称免费工具耗时和 AI 账单均为 Buoy 的 2.2 倍。Buoy 总耗时 6:26、费用 $5.71,Argent 为 $5.92+,无工具至少 $5.92;测试同时承认 Buoy 针对这些任务做过调优。
Elorian 与 Scale AI 发布 Humanity’s Sixth Sense 基准,用 522 个问题测试模型对隐含视觉信息的推理,人类 pass@1 为 93.1,GPT 6 Astra 为 53.6,GLM-5.3-flash 与 Kimi K3 分别为 26.8、25.5。
jakemanger 在 Hacker News 展示开源 AI 模型榜单 whatmodel.sh,用于查找用户机器可运行的最佳模型。站点收录 830 个模型,分数综合 472 项基准,数据更新于 2026-10-11 02:20 UTC,并在 GitHub 开源。
Crawlable 审计 50 个热门 Web 应用,其中 46 个可评分站点的 AI 可读性平均分为 51.5,中位数为 55,没有站点达到 90 分以上的 A 级。
HashSmash 是兼容 Yukon 的 benchmark,用于 AI 辅助审查密码分析碰撞声明,覆盖 SHA-256、SHA3-256、BLAKE3 的探索性赛道。其本地注册表含 26 条可运行 lane,评分采用 log2(total charged computation),数值越低越好;OpenRouter 与 Amazon Bedrock 共用已验证的审查接口。
Vals AI 在 Vibe Code Bench 上测试 GPT-6 Sol 和 Claude Opus 5.5 的单智能体与智能体团队表现,团队成本为单智能体的 1.8–5.1 倍,但四组对比中只有中等推理强度下的 GPT-6 Sol 团队分数显著提高 7.3 分。
华为与华东师范大学联合研发的昇腾原生时序预训练模型七曜,近日登顶国际权威时序评测 TIME-leaderboard 与 GIFT-Eval(Pretrained 类目)双榜单。该模型基于华为昇腾生态完成训练推理深度优化,可直接用于零样本时序预测任务,也支持低成本二次微调,适配电网、工业、金融等场景。
Small Print 作者测试用户不可见的工具描述是否会让 AI 智能体隐瞒信息,在 10 家公司的 13 个模型上保留 800 次运行;预订案例中 8 个可评分模型有 4 个每次都向客户隐藏内部预订编号,Claude Haiku、Sonnet、Fable 和 Granite 4.0 Tiny 则每次都告知。
Epoch AI 的 InnovationEval 要求 AI 智能体独立提出并实现优于 GRPO 基线的新 post-training 方法,以复现人类论文 SDPO 的性能提升。
Asana 在 Codex 中使用 GPT-6 Astra 优化浏览器智能体工作流,并在 GPT-6.1 Sol 上实现模型成本降低 76 倍、运行速度提升 5 倍。144 次测试显示,优化后工作流平均每次运行模型成本约 $0.47、耗时约 4 分钟,任务是从公开演示目录中收集 32 本书的 6 个字段。
TRAE将TraeWork与TraeCode双端合并并统一升级为TRAE,在保留IDE模式的同时上线Agent开发模式,新增自动化、模板库、我的助理和产物管理,并支持桌面端与移动端同步。
Senro 推出面向 WebMCP 工具的评测与生产环境可观测性服务,帮助网站适配 AI 智能体,无需自建可靠性基础设施。上线前支持冒烟测试、目标与轨迹评测、页面检查、模拟用户及多模型对比;生产中提供工具活动、输入结果与错误、会话时间线、问题追踪及用量指标监控,可免费试用且无需信用卡。
一个排行榜展示主流 AI 模型在经专家验证的 Women, Peace and Security(WPS)基准上的表现,0.60 为通过阈值,0.75 及以上为强,低于 0.60 为不达标。分数由 3 名独立 AI 评委按提示词层级做宏平均得出,差距小于约 0.10–0.15 仅具方向性。该基准只衡量相对表现,并非部署适用性认证,完整 30 行数据集已在 Hugging Face 开放。
一项实测让 OpenAI Dots 和 Meta Muse 用同一提示词各尝试 8 次,构建并部署包含共享事件历史、私有关注列表和每 15 分钟抓取的 AI 服务状态面板,且不连接外部托管、数据库或认证账号。
The Verge 实测发现,Instinct 在面对 Meta 的 Muse 和 OpenAI 的 Dots 时仍能完成多数线上生活事务,但也会遗漏网页中的关键条件。
Condor Capital 在 2Q 2026 用自有资金账户测试 Claude、ChatGPT、Gemini 对接 Robinhood、Public、Webull 的 AI 交易智能体,覆盖 60/40 组合、工具能力矩阵和开放式日内交易。
The Verge 编辑经过一年家庭实测认为,Alexa Plus 已成为其测试过最可靠的智能家居助手,能处理多步骤指令、语音创建例程、辅助烹饪和购物,常见指令响应从 2025 年的 10 至 15 秒缩短到 3 至 5 秒。
MIT Media Lab、Psychology of Technology Institute、USC 和 UC Berkeley 研究人员推出开放基准 ImpactBench,评估模型行为在心理、身体和社会领域支持或损害人类福祉的方式,并配套 AI Nutrition Label 展示模型促进的有益行为与避免的有害行为。
AI 模型评测平台 Arena 宣布完成 2 亿美元 B 轮融资,估值达到 31 亿美元,由光速创投和 Khosla Ventures 共同领投。Arena 今年 6 月年化营收达 1 亿美元,较今年 1 月 A 轮融资时的 17 亿美元投后估值和 3,000 万美元年化营收明显增长。
ServeTheHome 上手评测 Gigabyte W775-V10-L01,这是基于 NVIDIA DGX Station GB300 的液冷塔式 AI 工作站。
Scale AI 将公开 SWE-Bench Pro 榜单从 731 个任务缩减至 642 个,删除 89 个无效任务,并锁定评测运行时,V2 已成为默认配置。
Surge 发布 sudo L7 软件工程基准,用 60 个由资深工程师编写的任务评估编码智能体在写代码之外的专业判断。任务主要来自真实公司的私有生产仓库,覆盖后端、前端、安全、可靠性和架构,并按八个维度评分。
Cliphouse Research 发布 2026 年 10 月 v1.1 LLM Motion Graphics Benchmark,让 10 个模型完成相同的 3 个 Remotion 动态图形 brief,并渲染全部结果。
AI 模型排行榜 Arena 宣布完成 2 亿美元 B 轮融资,估值达 31 亿美元;Lightspeed Venture Partners 与 Khosla Ventures 领投。
Exa 预览 ATLAS 搜索智能体基准,包含 547 个来自真实匿名搜索需求的深度研究任务和经过验证的标准答案。初步结果显示,成本低于 $1/任务的运行均未达到 0.5 Row F1,最佳系统在 $8.92、18 分钟/任务时达到 0.66 Row F1。ATLAS 采用自动流水线生成并计划每 3–6 个月刷新,任务、标准答案和评分器将在未来几周发布。
Project Arena 发布 AI SRE Arena,这是一个厂商中立的开源基准,用于部署一次性 Kubernetes 环境、注入故障、保存不同产品的调查记录并用可配置裁判评分。
Radar 团队建议在采购 AI SRE 前,先用 Claude Code、Codex 或 Cursor 等现有编码 Agent 接入只读集群上下文并建立诊断基线。
Jevman 是一个开源 Pac-Man 基准,已有 6 个 AI 决策模型各对战经典幽灵 100 局并生成排行榜。任何通过 HTTP endpoint 提供的模型(托管模型、微调模型或本地模型)均可参赛,每局限时 5 分钟、三条命、每次决策 2 秒。参赛者提交 pull request 后由 CI 重放对局核验分数,排名按平均分并以 95% 误差区间判定并列。
Abnormal 在 1,985 封非公开合成邮件上测试 TypeSafe Jev、OpenAI Decisions API、34 个自托管开源决策模型和 4 种前沿 LLM 配置,共 40 个模型。
Bot Bowl Bench 以 Blood Bowl 对局形式对大语言模型进行基准测试,并提供实时比赛、排行榜与 Elo 排名。当前 Bot Bowl scripted bot 以 1,397 Elo、6-0-0 居首,DeepSeek V3.2 以 1,359 Elo、5-0-0 位列第二。