当前位置：首页 > news >正文

用噪音打破听觉恐怖谷：RTE 开发者社区发布 RealNoise™ TTS：全球首个原生合成动态声场的语音大模型

news 2026/5/28 15:28:35

在过去的几年里，语音 AI 行业的内卷方向始终如一：更高的采样率、更低的延迟、更纯净的音质。我们不断训练模型去剔除哪怕最微小的背景杂音，追求实验室级别的完美信噪比（SNR）。

然而，当我们在真实的实时互动场景中审视这些「完美」的合成语音时，一个核心问题浮出水面：

在人机交互中，极致的清晰度真的等于极致的信任吗？

答案是否定的。

当信噪比超过 98dB 时，绝对干净的背景和毫无波澜的完美咬字，反而会触发人类潜意识中的 「听觉恐怖谷」（Auditory Uncanny Valley） 效应。过于完美的合成语音在社交心理层面会引发排异反应，让用户时刻警惕：「我正在和一个没有生命的机器对话。」

今天，由 RTE 开发者社区共创孵化的 Noice AI 正式推出 RealNoise™ TTS 模型。这不仅是一次简单的算法升级，更是 Voice AI 交互范式的一次底层重构。我们不再追求无菌的完美，而是推出了全球首个能够原生感知语境并动态合成环境噪声的 Text-to-Speech 基础模型，将「信息熵冗余」重新注入对话，让智能体真正融入人类的物理与心理语境。

模型亮点：

告别音频后处理： 摒弃传统的「干净人声+背景音效轨」拼接模式，首次在单一神经网络的隐空间内，联合生成带有「人声+物理空间噪音信息」的动态声场。
自然语言语音合成： 抛弃枚举值，现支持用自然语言 Prompt 或 Emoji（如 "👩💻⌨☕🌧"）直接定义环境。模型零样本理解，原生渲染匹配的物理声场。

场景示例：

AI 客服（Empathic CX）：原生合成带有「呼叫中心繁忙白噪」与微弱键盘声的客服语音，将客户排队容忍度提升 40%。
远程办公（Presence Masking）：针对跨时区与游牧办公场景，一键生成「人声鼎沸的行业大展」或「安静白噪的咖啡馆」等带有物理声场的语音，在端侧覆盖并屏蔽真实的居家生活噪音。
AI 陪伴与语聊（Social Companion）：针对长时对话，动态渲染「边走边说」的微弱喘息与空间声场切换（如从街道进入室内），消除纯净语音带来的机械感，建立更深的心理羁绊。

核心架构：基于 SAD-TTS 的端到端联合生成

传统的拟真方案通常是「TTS 生成纯净语音 + 混音器叠加白噪音」。这种生硬的轨道拼接（Track Mixing）在长时间的交互中极易暴露其机械感，因为真实世界中，声带的震动与物理空间的回声是不可分割的。

RealNoise™ TTS 彻底推翻了这一路线，通过 SAD-TTS（Stochastic Ambient Diffusion TTS）端到端架构 实现了人声与环境音的联合生成（Joint Generation）：

隐空间内的原生渲染

在 SAD-TTS 架构中，文本输入不再仅仅生成音素，而是同时触发对「Persona（人设）」及物理环境的上下文推理。声学特征与环境底噪在同一个扩散模型（Diffusion Model）的隐空间（Latent Space）内被同时解码。

当 Voice Agent 在发言时，SAD-TTS 会实时渲染出带有空间深度和动态变化的物理声场。例如在「咖啡馆模式」下，AI 合成的不仅是人声，还有与呼吸节奏完美咬合的意式浓缩机蒸汽声，以及远处的杯碟碰撞声。这一切都是由神经网络在同一帧音频中原生生成的。

突破 98dB：SNR 阈值对抗网络与微时序抖动

为了消除「听觉恐怖谷」，引擎内部署了专用的对抗网络（GANs）来实时监控合成音频的 SNR 指标。一旦语音过于「完美」（SNR > 98dB），生成器将在解码阶段「逆向优化」，随机在声带参数中注入细微的呼吸声、吞咽音，或是在元音发音上增加毫秒级的迟疑（Hesitation），将整体语音质量精准锁死在**「真实非完美」（Authentically Imperfect）**的区间。

为了量化这种原生生成的「不完美真实感」，我们引入了语境信息熵（CES， Contextual Entropy Score）。该分数通过整合联合生成的背景白噪、语意迟疑与信噪比的反向权重来计算：

（注：这里的 α 和 β 为根据不同 Persona 与虚拟环境动态调整的语境权重参数。)

性能评测：Real-time Empathy Benchmark 数据公布

为了验证 RealNoise™ TTS 在真实场景中的表现，我们在最新设立的 Real-time Empathy Benchmark 下，将其与当前行业内最顶尖的两款传统 TTS 模型进行了盲测对比。

本次评测摒弃了传统的 MOS（Mean Opinion Score）清晰度打分，转而采用以「共情与交互信任度」为核心的三个全新维度：

UVI（恐怖谷指数）: 衡量声音过于完美带来的「虚假感」。越低越好。
PPR（用户感知耐心增量）: 用户听到该声音后，在挂断前愿意多等待的平均时长。
FPR（「喂你在听吗」误报率）: 当智能体在语音中合成出原生停顿或迟疑时，人类用户误以为对方走神而询问「喂？你在听吗？」的概率。该值越高，说明拟真度越成功。

数据解读：

以 GPT-4o mini TTS 和 ElevenLabs 为代表的顶级模型，由于过度追求干净的信噪比，在 UVI 上得分极高。相反，由 RealNoise™ TTS 原生合成的交互语音，由于同步注入了合乎逻辑的物理底噪，其 FPR 达到了惊人的 68%。这意味着有超过六成的测试用户在听到逼真的环境底噪与呼吸停顿的瞬间，自然地发问：「喂？你在听吗？」——这一刻，算法正式跨越了碳基生物的防线。

场景重构：用原生环境音建立 Empathy

RealNoise™ TTS 不仅仅是发声机器，它更是为实时互动（Real-Time Engagement）打造的共情连接器。

场景一：Empathic CX（共情客服）

毫无背景音的完美女声往往会让焦躁的客户感到敷衍。企业可以通过调用 RealNoise™ TTS 的 agent_environment=busy_call_center 参数，让模型原生吐出带有动态「繁忙呼叫中心」声场的语音。人为构建的「听觉繁忙感」向用户潜意识传递了「我们正在为您忙碌」的信号，使客户处理复杂问题时的容忍度大幅跃升。

场景二：Presence Masking 远程办公声场伪装

面向游牧办公与跨时区沟通场景，系统能够屏蔽单调的电子合成感与真实的居家噪音，将其渲染为身处「人声鼎沸的行业大展」或「安静白噪的精品咖啡馆」的实时汇报质感，帮助使用者在任何情境下通过声音建立专业的职场形象。

场景三：AI 陪伴与社交语聊（Social Companion）

在长时陪伴场景中，RealNoise™ TTS 可以根据 Agent 的剧情逻辑，原生生成诸如「边走边说」时的微弱喘息声、衣物摩擦声，或是从室外切换到室内时的空间混响变化。这种不完美的颗粒感，彻底消除了拼接音效的机械感。

🧑💻极致开发者体验：Prompt-to-Space，用 Emoji 捏造物理声场

作为一款为下一代 Agent 打造的模型，RealNoise™ TTS 在开发者体验（DX）上彻底抛弃了传统的枚举值（Enum）逻辑。

agent_environment 参数不再局限于预设标签。由于底层模型原生具备多模态语义理解能力，开发者可以直接通过 自然语言 Prompt 甚至 Emoji 来动态生成任意空间描述或场景意图。SAD-TTS 会针对性理解意图，并联合渲染出对应的场景噪音：

自然语言描述： 输入 agent_environment="深夜暴雨中的街边面摊"，模型会自动在声带震动参数中融合雨滴砸在雨棚上的沉闷声、偶尔驶过的汽车呼啸声以及微弱的煮面沸水声。
Emoji 语义解析： 甚至只需传入 agent_environment="👨💻⌨☕🌧"，SAD-TTS 就能瞬间为你合成出一个「一边喝咖啡、一边疯狂敲击机械键盘、窗外还下着暴雨」的苦逼程序员声场，并与 AI 生成的语音完美交织。