跳到正文

语音与音频

AI 语音与音频的进展:语音合成、实时对话、音乐生成与音频理解的模型与产品。

20条精选相关主题多模态AI 视频产品更新

最新精选

第 1–20 条 · 共 20 条
今天10月13日周二
10月2日周五
  1. IT之家(RSS)76

    日本法院首次确认声音受法律保护,AI 模仿声优津田健次郎声线构成侵权

    东京一家法院在声优津田健次郎起诉 TikTok 的案件中认定,AI 未经许可模仿其声线涉及权利侵害,并首次在日本司法实践中确认人的声音受法律保护。法院称未经演员本人许可使用其声音应视为侵犯形象权,但因涉事账号已注销,未支持要求 TikTok 下架视频的请求。TikTok 曾辩称视频使用的只是一般男性声音。

    推荐理由:判决把未经许可使用个人声音纳入形象权保护,为日本 AI 配音和声音克隆纠纷提供了司法参照。

9月30日周三
  1. Hacker News:AI 热帖82

    ElevenLabs 发布高表现力文本转语音模型 Eleven v4 与低延迟版 Eleven v4 Turbo

    ElevenLabs 发布文本转语音模型 Eleven v4 及其低延迟版本 Eleven v4 Turbo,主打情绪、语气、节奏、角色和上下文理解。Eleven v4 Turbo 面向智能体等低延迟场景,中位推理延迟约 100ms,请求到可听语音的中位时间约 150ms,并与 ElevenAgents 协同优化。

    推荐理由:文章系统介绍 Eleven v4 与 Turbo 的情感表达、延迟、多语言和声音克隆能力,可帮助读者判断其在配音与智能体场景的适用性。

9月29日周二
9月25日周五
9月23日周三
9月16日周三
  1. Google DeepMind86

    Google DeepMind 发布 Gemini 3.8 Live 与 3.8 Live Extended Thinking 语音对话模型

    Google DeepMind 发布 Gemini 3.8 Live 和 Gemini 3.8 Live Extended Thinking 两款近实时语音对话模型,分别面向规模化成本效率与高复杂度多步推理任务。

    推荐理由:官方同时给出两款实时语音模型的定位、基准成绩与 API、企业版和消费端开放路径,便于判断语音智能体落地选择。

9月10日周四
8月28日周五
8月27日周四
8月21日周五
  1. Hugging Face Blog67

    Hugging Face 研究提出三类测试,量化语音识别模型的基准优化现象

    Hugging Face 发布研究,用参考文本分歧、遮蔽实体检索和拼写切换三类探针测试 11 个开源 ASR 模型,发现部分高分模型会复现 VoxPopuli 和 LibriSpeech 参考转录中的错误或缺失内容。

    推荐理由:研究用三类探针把语音识别模型迎合公开基准的行为量化出来,为选型时超越单一 WER 和使用留出集提供依据。

8月11日周二
6月9日周二
5月18日周一
  1. Google DeepMind86

    Google DeepMind 发布 Gemini Omni Flash 多模态视频生成模型

    Google DeepMind 推出 Omni 系列首个模型 Gemini Omni Flash,支持组合图像、音频、视频和文本输入,生成依托 Gemini 现实知识的高质量视频,并可通过多轮自然语言对话编辑视频。

    推荐理由:可了解 Gemini Omni Flash 的多模态输入、对话式视频编辑与上线渠道,便于对比现有视频生成工具的工作流差异。

4月16日周四
  1. Google DeepMind72

    Google DeepMind 发布 Gemini 3.1 Flash TTS 语音模型

    Google DeepMind 推出 Gemini 3.1 Flash TTS 文本转语音模型,主打更强的可控性、表现力和音质,并通过 Gemini API、Google AI Studio、Vertex AI 预览开放,Workspace 用户可在 Google Vids 中使用。

    推荐理由:官方说明了模型的可控语音标签、多语种支持和预览入口,便于开发者判断其在语音应用中的接入方式。

3月24日周二
  1. Mistral AI81

    Mistral AI 发布 4B 参数文本转语音模型 Voxtral TTS

    Mistral AI 发布首个文本转语音模型 Voxtral TTS,参数规模 4B,支持英语、法语、德语、西班牙语、荷兰语、葡萄牙语、意大利语、印地语和阿拉伯语 9 种语言。

    推荐理由:官方公布了多语言语音生成、低延迟、声音适配和开放方式,可帮助评估其在企业语音智能体流程中的适用性。

3月7日周六
  1. Google Research62

    Google Research 发布 WAXAL:覆盖 27 种撒哈拉以南非洲语言的开放语音数据集

    Google Research 发布开放语音数据集 WAXAL,覆盖 27 种撒哈拉以南非洲语言、超过 26 个国家的 1 亿多名使用者。初始版本包含约 1,846 小时 ASR 转写自然语音和超过 565 小时 TTS 高保真录音,并以 CC-BY-4.0 许可开放。数据集自 2021 年起与非洲学术及社区组织合作建设,Google 还计划继续扩展语言覆盖。

    推荐理由:原文给出语言覆盖、ASR 与 TTS 数据规模及开放许可,便于读者评估其对低资源语音研究的基础价值。

2月5日周四
7月17日周四
  1. Mistral AI72

    Mistral AI 为 Le Chat 推出 Deep Research、语音模式、Projects 与图像编辑等功能

    Mistral AI 为 Le Chat 发布多项新功能,包括 Deep Research 预览模式、基于 Voxtral 的语音模式、由 Magistral 驱动的多语言 Think 模式、Projects 文件夹,以及与 Black Forest Labs 合作的高级图像编辑。

    推荐理由:官方一次性说明 Le Chat 在研究、语音、推理、项目管理和图像编辑上的能力扩展,可用于对比通用 AI 助手的功能演进。

7月15日周二