跳到正文
11月1日周日
10月29日周四
10月28日周三
  1. TechCrunch · AI51

    Nvidia 发布开源语音转写模型 Nemotron 3.5 Transcribe,支持 40 种语言

    Nvidia 发布免费开源权重语音转写模型 Nemotron 3.5 Transcribe,支持最多 40 种语言,可处理最长一小时的录音并区分最多 8 位说话人。该模型有 30 亿参数,可运行在从 Jetson AGX Thor、DGX Spark 到 Blackwell 数据中心芯片上,但目前仅支持录制音频而非实时流;Nvidia 同时发布了开源语音数据集 Granary 2。

10月27日周二
10月25日周日
  1. TechCrunch · AI46

    Block 发布全双工语音模型 Dessa,可在本地运行且声音近乎真人

    Jack Dorsey 旗下 Block 的研究实验室发布全双工语音模型 Dessa,可同时说话和倾听,能自然呈现笑声、停顿和哭泣等情绪,完全基于人类语音训练,可在 MacBook M4 Max 等消费级设备上单张 NVIDIA GPU 本地运行。Block 称 Dessa 的知识来自对话数据,无需搭配 LLM。该模型目前尚未公开,Block 正召集安全研究人员测试。

10月24日周六
  1. The Decoder48

    Block 发布纯语音训练 AI 模型 Dessa,可实时捕捉情绪

    Square 和 Cash App 母公司 Block 推出语音模型 Dessa,称其为首个完全用人类语音训练、不含文本数据的模型。它直接处理音频,可实时感知情绪、讽刺、笑声和停顿,支持全双工通信,能在 MacBook Pro M4 Max 上本地运行。该模型尚未公开,团队正招募 AI 安全研究员测试风险。

  2. The Verge · AI50

    Jack Dorsey 旗下 Block 推出对话式 AI 模型 Dessa,语气像略显笨拙的新朋友

    Jack Dorsey 旗下 Block 发布名为 Dessa 的 AI 模型,完全从人类对话数据从零训练,是真正的 speech-to-speech 模型。该模型可在 MacBook Pro M4 Max 或更高配置上本地运行,官网展示了它与人类聊天的多个示例,包括一段与 OpenAI GPT-Live-1 语音模型的对话,Dessa 表现得更为自然。

10月21日周三
  1. The Decoder57

    ElevenLabs 发布 Eleven Realtime 两款语音到语音模型

    ElevenLabs 于 10 月 20 日发布两款语音到语音模型 Eleven Realtime。v1 Max 在 Big Bench Audio 基准上得分 98.8%,响应时间 0.57 秒;v1 Mini 面向低成本的日常对话,能区分说话结束和附和语。两款模型可通过 ElevenAgents 平台和 OpenAI 兼容的 Realtime API 使用,按分钟加 token 计费。

10月20日周二
  1. 开源中国54

    蚂蚁百灵开源 Ming-3.0 语音系列模型

    蚂蚁百灵开源 Ming-3.0 语音系列,将「声音创作、长语音分析、业务语音转写」三类任务拆成三套模型、五款产品,开发者可按任务选型、按需组合。其中 Ming-3.0-tts 的亮点是「导演模式」,其 Voice Design 支持用文字描述目标音色,也支持参考音频定音色。

9月23日周三
9月16日周三