跳到正文

多模态

文本之外的能力:视觉理解、图文混合、音视频输入输出的模型与产品进展。

最新精选

第 1–20 条 · 共 88 条
今天10月13日周二
  1. Ars Technica · AI77

    Epic Games 据报在 Disney 合作射击游戏中转向 AI first 开发模式

    Epic Games 据 Bloomberg 报道,正为与 Disney 合作的射击游戏转向 AI first 开发模式,让 Claude 等模型编写全部代码并引导美术资产,人类开发者负责管理和指导生成内容。

    推荐理由:报道呈现了大型游戏项目把代码与美术流程转向 AI 生成的具体做法,也记录了项目延期和人员重组,可作为观察游戏工业 AI 化的样本。

10月12日周一
  1. Hacker News:AI 热帖76

    Graylark 的 Raven 新增室内照片地理定位功能,可帮助警方匹配具体住宅

    Graylark Technologies 的 Raven 新增室内图像地理定位功能,可让警方上传单张室内照片后,在选定区域内匹配具体短租房、住宅或酒店。

    推荐理由:文章用多个演示案例说明室内照片如何被匹配到具体房源,并补充平台回应与警方实际使用反馈,便于理解其侦查用途和隐私边界。

10月8日周四
  1. Hacker News:AI 热帖86

    Google Cloud 发布面向工作的通用智能体 Gemini agent

    Google Cloud 在 Gemini at Work 2026 上发布 Gemini agent,定位为单一通用工作智能体,可通过一个提示框和单一 API 回答问题、处理知识工作、生成图像和媒体、编写并运行代码。

    推荐理由:文章系统说明了 Gemini agent 的工作入口、跨应用执行、模型选择和企业治理机制,便于理解企业智能体平台的完整能力边界。

  2. Hacker News:AI 热帖82

    如何把 AI 变成世界级设计师:Anshu Chimala 的三阶段提示词方法

    Lenny 转载并解读 Anshu Chimala 的方法,用 Discover、Define、Deliver 三阶段引导 AI 智能体完成高质量界面设计。方法包括用随机字符串或大胆主题打破默认模板、让独立设计批评智能体只看截图评分迭代、接入图像和视频生成增强视觉,再通过删减元素与原生组件完成打磨。

    推荐理由:文章把随机种子、独立设计批评智能体和多模态生成接入具体提示词,适合直接迁移到 AI 界面设计流程。

  3. AWS Machine Learning Blog69

    Claude Haiku 5.5 登陆 Amazon Bedrock 与 Claude Platform on AWS

    AWS 宣布 Claude Haiku 5.5 已在 Amazon Bedrock 和 Claude Platform on AWS 可用。Anthropic 称其是 Claude 5.5 系列中最快、最高效的模型,面向子智能体和高体量、成本敏感任务,多数任务成本比 Claude Haiku 4.5 低约 75%。

    推荐理由:文章说明了模型定位、成本变化和 AWS 接入方式,便于团队判断高并发子智能体任务是否适合迁移。

  4. OpenAI News93

    OpenAI 向所有 ChatGPT 用户推出 GPT-6 与 Intelligent UI

    OpenAI 于 10 月 7 日宣布面向每周超过 12 亿 ChatGPT 用户推出 GPT-6,并在 Chat 中引入 Intelligent UI,可生成图形、按钮、表单、图表和交互式体验。

    推荐理由:官方说明了 GPT-6 在 ChatGPT 中的交互界面、渐进回答、安全改进和各套餐可用范围,便于读者判断日常使用变化。

  5. TechCrunch · AI86

    OpenAI 随 GPT-6 推出 ChatGPT Intelligent UI 可视化交互界面

    OpenAI 随新 GPT-6 模型推出 ChatGPT Intelligent UI,将按钮、定制计算器、可交互图表和可编辑图形等视觉元素融入对话。演示场景包括飞机机翼升力图解、食谱、自行车机械结构、多日徒步地图和个人储蓄计算器,用户也可以减少回答中的视觉内容。该功能周三面向 Pro、Plus、Business 和 Enterprise 用户全球推出,周四面向免费和低价 Go 用户开放。

    推荐理由:文章整理了 Intelligent UI 的交互形态、示例场景和分阶段开放范围,可帮助读者理解 ChatGPT 从文本对话向可视化界面的变化。

  6. Hacker News:AI 热帖78

    NVIDIA 论文发现多模态模型在智能体式使用工具时更难拒绝有害请求

    NVIDIA 论文《MLLMs Fail to Refuse when Using Tools Agentically》发现,11 个 VLM 在启用工具后拒答有害请求的失败率均上升,相对增幅最高达 68.7%,整体失败率增加 17.7%。

    推荐理由:论文用 11 个 VLM 和 3 个安全基准拆解工具调用削弱拒答的机制,为评估智能体安全提供了可复用实验框架。

10月7日周三
  1. Hacker News 热门(buzzing.cc 中文翻译)78

    OpenAI Decisions API 进入公开测试,仅支持 gpt-6-luna

    OpenAI Decisions API 进入公开测试,可评估文本、图像或二者组合,并返回类型化答案,速度约为 Responses API 的 10 倍。当前仅支持 gpt-6-luna,使用 POST /v1/decisions,问题类型包括 predicate、choice 和 score,适用于内容分类、请求路由和工作优先级排序。

    推荐理由:文档给出端点、问题类型、输入限制和计费方式,可帮助开发者判断哪些分类、路由和评分任务适合迁移。

  2. IT之家(RSS)78

    Google 发布 EmbeddingGemma 2:7.4 亿参数多模态嵌入模型,量化后手机端文本运行约需 191MB

    Google 正式推出 EmbeddingGemma 2,将嵌入能力从文本扩展到代码、图像、视频和音频,并把这些内容统一映射到同一嵌入空间。模型总参数 7.4 亿,基于 Gemma 4 架构,以 Apache 2.0 许可发布;纯文本部分为 2.7 亿参数,可按需加入视觉和音频编码器。

    推荐理由:原文给出参数量、内存占用、上下文和下载渠道,可帮助开发者评估端侧多模态 RAG 的接入可行性。

  3. Google DeepMind80

    Google DeepMind 发布开源轻量多模态嵌入模型 EmbeddingGemma 2

    Google DeepMind 发布 EmbeddingGemma 2,这是基于 Gemma 4 架构、采用 Apache 2.0 许可的 740M 参数多模态嵌入模型,可将代码、文本、图像、视频和音频映射到统一嵌入空间。

    推荐理由:原文给出参数量、模块化编码器、8K token 上下文和端侧内存数据,可帮助判断本地多模态检索方案的资源门槛。

10月6日周二
  1. The Decoder83

    Mistral 发布万亿参数模型 Mistral Large 4,主打网络安全与开放权重

    Mistral 推出迄今最大模型 Mistral Large 4 公开预览,模型为原生多模态,总参数 1.05 万亿、活跃参数 490 亿,上下文窗口为 100 万 token,权重计划于 10 月底发布。

    推荐理由:文章汇总了 Mistral Large 4 的参数规模、开放节奏、评测位置和网络安全定位,便于与 Claude、GPT-6 等闭源前沿模型横向比较。

  2. 🚨 AI News | TestingCatalog77

    Mistral 发布 1T 参数开放权重模型 Mistral Large 4 “Le Chonk”,激活参数 49B,支持原生多模态,API 当日开始推出,开放权重计划于 10 月底发布。TestingCatalog 引用 VentureBeat 称,其 DeepSWE 得分为 62%,高于 GLM-5.3;Finch 金融任务得分为 67%,Harvey 法律智能体基准得分为 15%,后两项均称为开放权重 SOTA。

    引用🚨 AI News | TestingCatalog@testingcatalog

    BREAKING 🔥: Mistral announced Mistral Large 4 "Le Chonk", a new 1T-parameter open-weight model! > 49B active parameters, native multimodality. > Rolling out via APIs today; open-weight release is planned for the end of October. > SOTA on "critical workloads", including cyber defense. Le Chaton Fat "Le Chonk" is here 👀 https://x.com/MistralAI/status/2107457414387622310/video/1

    推荐理由:汇总了 Mistral Large 4 在代码、金融和法律任务上的基准分数,可与 GLM-5.3 等模型横向比较。

  3. Hacker News:AI 热帖86

    Mistral Large 4 公开预览发布,月底开放权重

    Mistral 发布 Mistral Large 4 公开预览,内部称 ML4,模型为 1 万亿参数、490 亿活跃参数的原生多模态模型,权重将于本月底发布。模型在 Mistral Studio 提供预览 API,使用 3,800 块 NVIDIA Grace Blackwell GPU 在欧洲自有数据中心从零训练,训练数据覆盖 160 多种语言。

    推荐理由:材料集中给出 Mistral Large 4 的参数规模、开放权重计划和多类基准表现,便于横向了解其定位。

  4. Hacker News 热门(buzzing.cc 中文翻译)76

    调查称 ChatGPT 在伪造的《纽约客》风格漫画中添加真实漫画家签名

    Nieman Lab 调查发现,ChatGPT 会在生成的《纽约客》风格漫画中加入 Brendan Loper、Emily Flake 等真实漫画家签名,作者记录到超过 15 名漫画家的签名被未经许可使用。

    推荐理由:文章通过实测和漫画家访谈呈现签名被复现的具体案例,并梳理版权、公开权与训练授权边界。

10月4日周日