Gradio Workflow 教程:用 Workflow1111 复刻 AUTOMATIC1111 工作流
Hugging Face 展示 Workflow1111,用 Gradio Workflow 的 73 个节点和 11 条媒体管线复刻 AUTOMATIC1111 stable-diffusion-webui 的大部分功能。
推荐理由:文章用 73 个节点复刻 AUTOMATIC1111 的主要功能,可帮助理解如何把多模型能力组织成可调用的可视化工作流。
文本之外的能力:视觉理解、图文混合、音视频输入输出的模型与产品进展。
Hugging Face 展示 Workflow1111,用 Gradio Workflow 的 73 个节点和 11 条媒体管线复刻 AUTOMATIC1111 stable-diffusion-webui 的大部分功能。
推荐理由:文章用 73 个节点复刻 AUTOMATIC1111 的主要功能,可帮助理解如何把多模型能力组织成可调用的可视化工作流。
Genspark 与 Fireworks Lab 将开源多模态模型 MiniMax M3 后训练为 Gen-1 Slides,可端到端规划、撰写并自检幻灯片,现已作为 Genspark AI Slides Standard 模式默认模型上线。
推荐理由:文章给出了从 MiniMax M3 后训练到专用幻灯片模型的完整 RL 方法、成本对比和生产指标,适合了解长程智能体训练如何落地。
Google DeepMind 与 Google Research 发布全球天气 AI 模型 WeatherNext 3,接入实时卫星数据、每小时更新,并提供最高 5 公里分辨率预报。
推荐理由:文章说明了实时卫星数据、逐小时更新和多档分辨率如何改进局地与降水预报,并列出 Google 产品和云端接入入口。
H Company 与 Hugging Face 发布 260M 和 800M 两种规格的 NeoMME 多模态多语言编码器,并用其微调得到视觉文档检索模型 NeoMME-Retriever。
推荐理由:文章给出单塔架构、ViDoRe v3 成绩、编码吞吐和索引压缩数据,便于评估其在视觉文档检索与视觉 RAG 中的工程取舍。
Google DeepMind 为 Gemini 3.7 Flash、3.6 Flash 和 3.5 Flash-Lite 推出智能体视频理解能力,可动态搜索、扫描和检查视频帧、音频及字幕中的相关片段。
推荐理由:官方说明了动态检索视频片段的工作方式、成本与 token 变化,便于开发者评估长视频分析接入路径。
Google Research 介绍 Google Earth AI 旗下实验性研究能力 Planetary Prediction Engine(PPE),可根据自然语言查询自动完成地理空间数据发现、清洗、特征工程、模型训练与评估,并生成报告。
推荐理由:文章给出了自动化地理空间建模的三阶段流程,并在公共卫生、粮食安全和疫情预测任务中提供了可对比的基准结果。
Google DeepMind 推出 Gemini Omni 1.1 Flash,通过 Google AI Studio 的 Gemini API 面向开发者提供新的创作控制和生成视频能力。
推荐理由:官方说明了场景延展、首尾帧、360p 草稿和 4K 升清等视频控制能力,便于开发者评估接入方式。
Sentence Transformers v6.0 新增第四种模型类型 MultiVectorEncoder,用于 ColBERT 式晚交互检索,并可直接加载 PyLate、Stanford-NLP ColBERT 检查点,也支持 colpali-engine 视觉文档检索模型。
推荐理由:文章围绕 Sentence Transformers v6.0 的 MultiVectorEncoder,给出加载、检索、索引和多模态用法,便于直接迁移到现有 RAG 流程。
Google DeepMind 发布大规模多语言手语转文本模型 SL2T,首先支持 ASL 到英语,并在 Pixel 11 的 Gboard 和 Live Transcribe 中提供手语转文字听写,更多设备和语言将随后推出。
推荐理由:原文说明了 SL2T 的手语到文本技术路径、训练规模和首批落地入口,可帮助读者理解视觉手语翻译进入消费产品的方式。
Google Research 发布基于 Gemini 和 Project Astra 的 AMIE (Video),可进行同步临床视频问诊、识别非语言线索、引导虚拟查体并实时完成诊断推理。
推荐理由:文章给出 AMIE (Video) 的三智能体架构和 300 场随机视频问诊结果,可用于理解多模态临床 AI 从文本走向实时音视频的技术路径。
Fireworks 宣布 Meta 的 Muse Glimmer 30B 已在 serverless 和 on-demand 部署中可用,定位为支持多轮连续工具调用、失败恢复和长上下文任务的 Always-On 智能体模型。
推荐理由:文章给出模型架构、部署方式和面向智能体工作流的基准结果,可帮助判断其在长链路工具调用场景中的适配性。
Meta 发布 Muse Glimmer-30B,这是从 Muse 蒸馏出的 30B 稠密多模态模型,采用 Apache 2.0 许可,面向本地智能体、编码、文档分析和个人助理等隐私敏感场景。
推荐理由:文章同时给出架构、基准和 transformers、llama.cpp、vLLM 的 day-0 接入方式,便于评估本地智能体部署路径。
Mistral AI 发布 3B 开源权重多模态安全分类模型 Shieldstral,采用 Apache 2.0 许可,可在单张 16GB GPU 上运行。模型把内容审核建模为二元问答任务,用户在推理时用自然语言提供策略,模型通过单个 token 输出校准的 yes/no 安全分数,无需重新训练即可评估文本、图像及文本加图像内容。
推荐理由:原文说明了用自然语言策略在推理时适配审核规则的设计,便于理解小模型安全分类器的工程取舍。
Google DeepMind 发布 Gemini Robotics ER 2,这是面向机器人的具身推理模型,可理解视频、编排多步任务、调用 Google Search 或用户自定义工具,并把运动执行交给低层 VLA 模型。
推荐理由:官方说明了视频理解、任务编排和多机器人协作能力,并给出 API 与 AI Studio 的可用入口。
Google DeepMind 推出 Gemini Robotics 2,包含 VLA 模型 Gemini Robotics 2、具身推理模型 Gemini Robotics ER 2 和本地运行的 Gemini Robotics On-Device 2。
推荐理由:官方拆解了三款模型在全身控制、灵巧操作、长程协作和端侧适配上的分工,可帮助理解机器人智能层的能力边界。
Fireworks 宣布开放权重模型 Kimi K3 已在平台 Day-0 提供推理和训练,支持按 token 付费、Serverless 接入、Batch 模式 50% 折扣,以及美国境内推理和 Zero Data Retention。
推荐理由:文章同时给出推理、训练入口、数据驻留与零保留策略,便于团队评估用开放权重模型承接生产任务的可行性。
Google DeepMind 发布 Gemini 3.6 Flash、3.5 Flash-Lite 和网络安全专用的 3.5 Flash Cyber,主打规模化构建 AI 智能体所需的效率、低延迟与可靠性。
推荐理由:官方同时给出三款模型的定位、价格、速度与基准表现,可帮助开发者按延迟、成本和智能体任务需求选型。
Thinking Machines 在 Hugging Face 发布开源多模态 LLM Inkling,并推出 Inkling-Small 及 NVFP4 等变体。
推荐理由:文章同时给出模型架构、量化部署配置和多框架支持,便于评估多模态推理模型的落地门槛。
Hugging Face 发布 LeRobot v0.6.0,围绕想象、评估和改进机器人学习闭环,新增 VLA-JEPA、FastWAM、LingBot-VA 世界模型策略,以及 GR00T N1.7、MolmoAct2、EO-1、EVO1、Multitask DiT 等 VLA。
推荐理由:版本说明覆盖模型、奖励模型、数据集、评测和部署链路,可帮助机器人学习团队判断哪些新组件能接入现有训练流程。
Photoroom 公开 PRX 7B 文生图模型的数据管线:混合公共与内部数据集,用 VLM 为全部图片重新生成详细长描述,再写成可流式训练的 MDS 语料。
推荐理由:文章拆解了7B文生图模型从数据探索、VLM重标注到分桶、过滤和去重的完整管线,工程取舍可直接参考。