小米开源 MiDashengLM-Spatial,让模型判断声音方向与运动
- 模型发布:小米技术团队 10 月 15 日开源空间音频理解大模型 MiDashengLM-Spatial,以 MiDashengLM-7B 为基础。
- 能力范围:模型可在理解语音、环境声和音乐内容的同时,判断声源方向、相对位置及运动轨迹。
- 技术细节:采用双分支音频编码器,新增轻量空间分支处理双耳信号;训练空间能力所用双耳音频约 1 万小时。团队用交换左右声道检查模型是否真正利用双耳信号。
- 开放与用途:权重与推理代码以 Apache 2.0 许可证公开,可用于商业集成或学术研究;计划应用于智能家居、汽车座舱等场景。
- 行业意义:音频模型从内容识别扩展到空间感知,为座舱与具身环境提供更接近听觉定位的输入。 🔗 爱范儿早报





