跳到正文
11月10日周二
  1. Google Developers Blog74

    Google AI Edge Gallery 新增端侧语音识别与语音合成能力

    Google 在 Google AI Edge Gallery 中新增端侧 ASR 与 TTS 能力,可完全离线运行。Android 端 ML Kit 支持 100+ 语言转写,速度达 10 倍实时,FLEURS 词错率 8.0% 至 9.0%;TTS 约 100 ms 起播,以最高 50 倍实时速度合成 24 kHz 音频,APK 零增加。

    推荐理由:官方给出端侧 ASR 与 TTS 的具体指标和三条接入路径,开发者可据此评估把语音能力加入本地 AI 应用的方案。

11月9日周一
  1. Zyphra Research67

    Zyphra 发布 ZONOS3-Mini 开源实时语音克隆 TTS 模型

    Zyphra 发布 ZONOS3-Mini,一个零样本语音克隆 TTS 模型,采用稀疏 MoE 架构,1 亿活跃参数、8 亿总参数,Apache 2.0 许可,在 112 块 NVIDIA H100 上训练 2.5 天。

    推荐理由:原文给出参数规模、端侧延迟数字和 ZTTS2-Eval 排名,开源权重与多端运行时可帮助读者评估实际部署成本。

11月6日周五
  1. Meta:Newsroom · AI54

    Meta 在 Muse 应用推出实时语音对话与表情化头像

    Meta 在 Muse 应用的移动端、网页端和 Mac 上推出实时语音对话,点击右上角电话图标即可开始通话。语音模式支持边说边完善旅行规划、面试和演讲排练等场景;头像会随对话语气做出细微表情和手势,提供仅语音、侧边头像和全屏三种显示方式,另有数百种可选声音。本次功能先在美国推出,AI Glasses 和 Muse Charm 上的语音对话即将到来。

11月5日周四
10月27日周二
10月22日周四
  1. Sierra:Blog53

    Sierra 发布 𝜏-Entity 基准,测试语音智能体能否准确记录姓名、电话等信息

    Sierra 推出 𝜏-Entity 基准,用 200 个任务、10 类实体测试语音智能体能否正确捕捉并修复姓名、电话、地址、邮箱等细节。GPT Live 1 常规通话正确率 60.3%,但三种条件全部通过仅 34.0%;预设验证策略可将通过率提升 14–31 个百分点,代价是每次通话多 21–28 秒,且被验证的初始错误中只有 24–37% 最终被纠正。

10月20日周二
10月16日周五
  1. LiveKit 产品与工程博客53

    LiveKit 发布生产级 AI 语音智能体构建指南,沉淀客户部署经验

    LiveKit 发布生产级 AI 语音智能体构建指南,围绕自然对话、生产观测和可靠扩缩三大问题给出经验建议。要点包括单独测量首响应延迟、用 turn detector 处理轮次与打断、异步调用耗时工具,客户从 GPT-4.1 换到 Gemma 4 31B 在 p50 上省了 300–500ms;还建议为 STT、LLM、TTS 各阶段配置 fallback,并在上线前算清单次对话成本。

10月13日周二
10月9日周五
  1. LiveKit 产品与工程博客47

    Serve AI 借助 LiveKit Agent Simulations 迁移语音智能体,containment 提升 15%

    Serve AI 用 LiveKit Agent Simulations 验证并将其客服语音智能体从 Retell 的 224 节点流程图迁移为单提示词架构。团队用约 100 条真实生产通话生成模拟场景,经 10-15 轮迭代达到 98% 通过率、中位轮次延迟 1.3 秒(上限 1.5 秒),首个账户迁移仅一周且无需回滚。

10月7日周三
10月6日周二
10月2日周五
  1. Suno:Blog66

    Suno 推出 Speech (beta):语音与背景音乐一体生成

    Suno 推出 Speech (beta),官方称其为首个能将语音与原创背景音乐作为一轨完整生成的音频模型。用户在 Suno 中输入文字并描述音色与音乐风格即可创作,此前已小范围测试一个月,现面向所有用户开放 beta。

    推荐理由:官方公布了 Speech 的使用方式和已知局限,读者可以据此判断口播配乐创作能否融入现有工作流。

9月29日周二
  1. Google AI:DEV 作者专属62

    如何用 Gemini Live API 构建实时语音 AI Agent

    Google 开发者团队介绍如何用 Gemini Live API 构建可实时对话、可被打断的语音 Agent,架构包括浏览器客户端、Gemini Live API 和基于 google-genai SDK 的 Python 后端,通过 WebSocket 保持双向音频连接。

    推荐理由:官方教程讲解了 Gemini Live API 双向音频架构和降低打断延迟的本地缓冲技巧,读者可以直接照做复用。

9月21日周一
  1. LiveKit 产品与工程博客56

    LiveKit 官方对比 LiveKit Agents 与 Pipecat 两大开源语音视频 Agent 框架

    LiveKit 博客发布指南,从架构、采用度、开发体验和生产就绪度对比 LiveKit Agents 与 Pipecat 两大开源语音视频 Agent 框架。核心差异是 LiveKit Agents 构建在高抽象的会话模型上并绑定自家 WebRTC/SIP 服务器,Pipecat 则让开发者自选 transport 并逐级组装 pipeline,适合非对话式或并行分支场景。

9月18日周五
9月16日周三
9月9日周三
  1. Suno:Blog77

    Suno 发布 v6 音乐模型,推出旗舰、探索和免费三档

    Suno 发布新一代音乐模型 v6,与 Warner Music Group、BMG 和 Believe 等行业伙伴合作开发,包含 v6、v6-wild 和 v6-mini 三款模型,分别面向精准创作、风格探索和免费快速生成。v6 支持用自然语言编辑歌曲片段、混搭多来源素材、采样构建节拍,以及从文本、音频、图片和视频生成音乐,上线后将逐步替换旧模型。

    推荐理由:原文出自 Suno 官方,给出 v6 三款模型的定位差异和新编辑能力,读者可以对照自身创作需求选择版本。

  2. LiveKit 产品与工程博客47

    LiveKit 解读语音智能体「VAD inference slower than realtime」警告的含义与修复方法

    LiveKit 发文解释语音智能体日志中「inference is slower than realtime」警告:它与所用 STT、TTS、LLM 模型无关,而是智能体进程内的 VAD 模型未能在 32ms 内处理完每 32ms 音频窗口,警告中的 delay 表示 VAD 落后实时音频的距离,Python 按秒、Node.js 按毫秒报告。

9月2日周三
9月1日周二
8月24日周一
  1. LiveKit 产品与工程博客53

    LiveKit 详解语音智能体中短语句导致静音的排查方法

    LiveKit 博客讲解语音智能体对 "yes"、"no" 这类短回复失去响应的排查方法,核心是 turn 闭合需要 final_transcript 和 end_of_speech 两个事件。文中逐项分析 STT 缺失最终转录、endpointing 设置过激或过松、噪声消除误删用户音频、SIP 通话质量差和 backchannel 被误判为打断等根因,并给出对应修复方案与按序诊断清单。

  2. LiveKit 产品与工程博客44

    LiveKit 推出按秒计费

    LiveKit 宣布自本月起对 agent 会话分钟数与录制、WebRTC 连接、SIP 连接改为按秒计费,最小计费增量 10 秒,让账单更贴近实际用量。该变更适用于包括企业合同在内的所有计划,已对现有客户生效,将于 9 月账单反映 8 月用量。此举主要解决外呼场景中通话常只有数秒却按分钟计费的错配问题,且不涉及面向客户的技术改动。

8月20日周四
8月14日周五
  1. Suno:Blog62

    Suno 发布 Studio 2.0,新增 MIDI、聊天栏与自动化等创作功能

    Suno 发布 Studio 2.0,面向音乐创作者带来更深度的制作控制,现已向 Premier 订阅用户开放。新功能包括在时间线上导入、录制和编辑 MIDI 并配合新的 wavetable 合成器,MIDI 片段还可作为音频生成的提示;Chat bar(beta)支持用对话方式创建乐器、人声和自定义插件,上线期间创建插件不消耗 credits。

    推荐理由:官方列出 MIDI、Chat、分轨分离等具体新能力与订阅门槛,音乐创作者可据此评估是否升级工作流。

8月11日周二
  1. Suno:Blog59

    Suno 更新下载政策与服务条款,9 月 3 日起实施分层下载限额

    Suno 宣布 9 月 3 日起实施新的下载限额和新服务条款,并将推出与音乐行业合作开发的新一代模型,届时旧模型全部退役。下载限额为 Free 终身 7 次试用下载、Pro 每月 20 次、Premier 每月 60 次,Suno Studio 不限额,超出可付费购买;已生成歌曲保留在曲库中可播放分享,付费计划下载的歌曲保留商业使用权。

7月29日周三
  1. Waymo:Blog53

    Waymo 为 Ojai 车型推出车内 Gemini 助手与全新界面

    Waymo 官方宣布为面向网约车设计的 Ojai 车型推出 Gemini in Waymo 与重新设计的车内界面。Gemini 助手处于 beta 阶段,可控制座舱空调、提供行程信息和周边知识,但独立于 Waymo Driver,不控制车辆行驶或路由,也无权访问实时驾驶数据;新界面采用三屏联动设计,按乘客位置分配显示内容,并新增可调暗屏幕的 Calm Mode。

7月8日周三
  1. OpenAI:部署安全与系统卡49

    GPT-Live 系统卡:GPT-Live-1 语音安全评测修正后的分数变化

    OpenAI 发布 GPT-Live 系统卡,说明 GPT-Live-1 与 GPT-Live-1 mini 的训练数据、过滤流程及语音原生安全评测。8 月 4 日更正评测配置后重跑评测,GPT-Live-1 在非法行为上从 0.97 回归到 0.95,GPT-Live-1 mini 从 0.94 回归到 0.91,另有性内容与血腥内容分数下降,但均未低于安全上线标准。

6月12日周五
  1. Zyphra Research68

    Zyphra 发布 Apache 2.0 开源实时 TTS 模型 ZONOS2

    Zyphra 发布开源实时语音合成模型 ZONOS2,采用 MoE 架构,总参数 8B、激活参数 900M,Apache 2.0 许可,称其为首个开源 MoE TTS 模型。

    推荐理由:官方同时放出权重、推理代码和自建评测集,还解释了 WER 与克隆保真度的权衡,读者可据此评估其语音克隆路线。

6月11日周四
  1. Suno:Blog59

    Suno 升级 Stem Separation,新增三种音轨拆分方式

    Suno 宣布改进 Stem Separation 功能,提供 Auto Split、Split from Mix 和全新的 Advanced Split 三种拆分方式,最多可拆成 12 条音轨,Advanced Split 支持从近 100 种乐器中精确提取且仅限 Premier 订阅。该功能采用模型重新生成音轨而非切割原曲的方式,减少串音和水声伪影,可用于自己创建或上传的歌曲,为付费订阅功能。

6月6日周六
  1. Suno:Blog41

    Suno 讲解 Voices 功能的 6 个录制使用技巧

    Suno 分享用好 Voices 功能的 6 个技巧:在安静无回声处录制、提前练习、不必追求完美、尽量录长一些(建议至少一分钟)、让嗓音匹配曲风并大胆尝试不同类型。Voices 现已在 Web、iOS 和 Android 上可用,可免费试用,付费计划提供更多功能。

5月5日周二
3月27日周五