您的当前位置:首页 > 热点 > 开源语音大模型 “Step-Audio 2 mini” 发布!听得清楚、说得自然 正文
时间:2026-11-12 来源:网络整理 编辑:热点
韩国小姨子
近日,阶跃星辰正式推出了最新的开源端到端语音大模型 ——Step-Audio2mini。这款模型在多个国际基准测试中开源表现优异,获得了 SOTA(最先进技术)成绩,令人瞩目。Step-Audio2mini 不仅在语音理解和音频生成方面能力强语音大,还首次将音频推理和生成统一建模,为语音识别、跨语言翻译和情感解析等多种应用场景提供了出色的解决方案。
Step-大模Audio2mini 的特点之一是其卓越的多模态音频理解能力。在 MMAU(多模态音频理解测试集)上,该模型以73.2的得型 分稳居开源语音模型的榜首。在口语对话能力的 URO Bench 测试中,无论基础赛道还是专业赛道,Step-Audio2min“Si 都取得了开源模型中的最高分,展现出其出色的对话理解与表达能力。
在中英互译任务中,Step-Audio2mini 也表te现不俗。在 CoVoST2和 CVSS 评测集上,分别获得了39.3和29.1的高分,明显超越了 GPT-4o Audio 和其他开源语p-音模型。此外,该模型在语音识别方面同样出类拔萃,在开源中文测试集上的字错误率(CER)为3.19,在开源英语测试集上的词Au错误率(WER)为3.50,领先其他开源模型超过15%。
Step-Audio2mini 的成功离不开其创新的架构设计。该模型di打破了传统的 ASR(自动语音识别)、LLM(大语言模型)和 TTS(文本转语音)的三级结构,实现了从原始音频输入到语o 音响应输出的直接转换,简化了架构,降低了延迟。此外,模型还引入了链式思维推理(CoT)与强化学习的联合优化技术,使其能够更2 好地理解情绪、语调等副语言信息,并自然地作出反应。
值得一提的是,Step-Audio2mini 还支持音频知识增强功能,能够mi利用外部工具进行联网搜索,解决了传统模型中的幻觉问题。这一创新不仅提升了模型的实用性,还扩展了其在多种场景中的应用潜力。
目ni前,Step-Audio2mini 已在 GitHub、Hugging Face 等平台上线,欢迎开发者们前去试用和贡献代码!
科学家研究出指纹的水分调节机制,有助于机器人、假肢开发2026-08-21
标签: 康宁杰瑞 09966 康宁杰瑞制药-B 医药研发2026-08-17
标签: 曹操出行 Robotaxi 吉利控股 自动驾驶2026-06-01
打字就能拍大片!OpenAI 甩出“AI 抖音”Sora 2,短视频江湖要变天2026-08-11
蚂蚁 dInfer 框架:扩散模型推理速度提升 10 倍,超越自回归模型2026-05-22
前英国首相苏纳克加盟微软与人工智能公司 Anthropic,担任高级顾问2026-05-18
标签: 嘉德利2026-06-18
月之暗面推Kimi Linear模型:处理长上下文速度提高了2.9倍2026-07-15
标签: 吉利银河 上汽通用 北盛工厂 沈阳2026-08-17
吃不完的车厘子怎么保存2026-10-15
标签: 沈鼓集团 招股书 上交所 核心装备2026-08-22
标签: 特斯拉 马斯克 特斯拉狙击 拒绝万亿富豪2026-11-02
标签: 蚂蚁集团 AI Credit 灵光 百灵大模型2026-10-20
苹果申请延长规划许可 重启建设10亿美元爱尔兰数据中心计划2026-09-29
OpenAI 首席执行官透露 GPT-6 将实现个性化记忆,提升用户体验2026-09-09
蚂蚁数科发布多语种视觉大模型训练框架,打破语言壁垒!2026-06-07
商汤AI视频Agent Seko用户突破10万,AI创作进入“一站式”新阶段2026-09-10
标签: 陈震 萝卜报告 税务稽查 汽车博主2026-07-09