新闻详情

新闻详情

首页 / 资讯中心 / 详情

多人说话场景难题待解,小米开源 CocktailASR - 1 模型精准定位目标语音!

发布时间:2026/9/11 23:37:20来源:尧图网络
多人说话场景难题待解,小米开源 CocktailASR - 1 模型精准定位目标语音!
【导语在 ASR 模型面临多人同时讲话场景难题时小米开源了 CocktailASR - 1 模型。它采用目标说话人语音识别技术在多场景测试中表现出色还具备负样本拒识和思维链推理等特性意义重大。】创新思路从根本改变 ASR 任务输入人类听觉能轻松从嘈杂人群中剥离人声但 ASR 模型在多人同时讲话场景难题待解。小米的 CocktailASR - 1 没有做“更好的降噪”而是从根本上改变任务的输入采用目标说话人语音识别先给模型参考音频定位目标说话人再让其只转录该人的语音过滤其他人说话内容、混响和背景噪音。端到端架构单模型搞定多场景CocktailASR - 1 是端到端 LLM 架构即 D2V2 音频编码器 - Adapter - LLM 解码所有权重放在一个 checkpoint 里。输入格式是参考音频和目标音频拼接中间插一秒静音分隔为 16kHz 单声道。它无需针对不同场景切换模型单人或多人场景都能应对。测试领先精度远超同赛道竞品基准测试结果显示CocktailASR - 1 表现优异。在多说话人模拟测试中LibriMix 2mix 的 WER 只有 4.11%LibriSpeechMix 2mix 更是低至 2.90%在 LibriMix 3mix 测试中Qwen3 - ASR、Gemini、StepAudio 全军覆没而 CocktailASR - 1 为 12.29%。在真实会议录制测试中AMI SDM 的 WER 是 21.81%AliMeeting Far 是 20.63%大幅领先已有方案。单人场景下在 LibriSpeech 等数据集上也全面领先。附加特性负样本拒识与思维链推理该模型具备负样本拒识能力当参考音频对应的人不参与当前对话时输出空文本。在 LibriSpeech 负样本上拒识率达 79.59%Aishell 上是 75.35%小米自有的中文测试集上是 68.54%而 Qwen3 - ASR 和 StepAudio 无此能力。同时它还具备思维链推理功能可在输出答案前展示推理过程对调试和可解释性有意义且对精度影响不大。编辑观点小米 CocktailASR - 1 模型在技术上创新突破多场景测试表现亮眼且有实用特性从“所有声音”到“一个声音”的转向为行业发展提供新思路。
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

代码审查实践指南:提升开发质量与团队协作 2026/9/12 0:13:28

代码审查实践指南:提升开发质量与团队协作

1. 代码审查的本质与价值 2008年,当谷歌工程师团队开始强制推行代码审查制度时,内部反对声此起彼伏。十年后统计数据显示,采用严格代码审查的团队,生产环境缺陷率降低了40%。这个真实案例揭示了代码审查(Code Review&a…

阅读更多 →
反弹Shell技术详解:从NetCat到OpenSSL加密实战 2026/9/12 0:13:28

反弹Shell技术详解:从NetCat到OpenSSL加密实战

1. 反弹Shell的本质与核心价值在渗透测试的实际工作中,反弹Shell(Reverse Shell)是最基础也最关键的突破口之一。与常规Shell相比,反弹Shell的特殊之处在于连接方向的逆转——不是攻击者主动连接目标主机,而是让目标主…

阅读更多 →
TM4C129通过SPI控制AD5293数字电位器实现可编程电阻校准 2026/9/12 0:13:28

TM4C129通过SPI控制AD5293数字电位器实现可编程电阻校准

做校准设备和工业仪表这些年,我最大的一个体会就是“电位器不可信”。出厂调好的机械电位器,三个月后可能漂得一塌糊涂,振动、湿度、温度变化都会让阻值发生变化,更别提产线上每一位工程师调出来的值都可能不一样。所以当项目里需…

阅读更多 →
网络安全入门:从基础认证到攻防实战 2026/9/12 0:13:28

网络安全入门:从基础认证到攻防实战

1. 网络安全技术全景解析第一次接触网络安全时,我被那些专业术语搞得晕头转向。直到在某个凌晨三点调试防火墙规则时突然明白:网络安全本质上就是一场攻防双方的智力博弈。就像中世纪城堡的防御体系,现代网络安全同样需要构筑层层防线&#x…

阅读更多 →
Misc技术实战指南:从文件隐写到数据恢复 2026/9/12 0:13:28

Misc技术实战指南:从文件隐写到数据恢复

1. Misc基础2:从零开始掌握杂项技术核心刚入行那会儿,我最怕遇到文件开头写着"Misc"的任务包——这就像开盲盒,可能是编码转换、可能是隐写分析、还可能是数据恢复。经过七年实战踩坑,我总结出这套系统性的杂项处理框架…

阅读更多 →
高压电源模块选型:从拓扑边界到行业隐性需求图谱 2026/9/12 0:10:28

高压电源模块选型:从拓扑边界到行业隐性需求图谱

1. 为什么一张“分类图谱”比十份参数表更有决策价值 我第一次在某电力电子设备厂做现场技术支持时,客户工程师指着桌上三台标着不同型号的高压电源模块,问我:“这三款都能输出30kV/5mA,哪个更适合我们电除尘系统的连续稳态运行&a…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞