硬件|ClearBuds团队介绍基于实时机器学习的通话音频增强技术
对于习惯了佩戴支持主动式降噪(ANC)耳机的用户们来说,你会发现市售产品的解决方案仍有一定的改进空间 —— 麦克风会拾取诸多音频,而不是你想要集中注意力的那部分 。好消息是,来自华盛顿大学的一支研究团队,刚刚介绍了一款名叫 ClearBuds 的真无线耳机,特点是能够利用实时机器学习来增强语言体验 。
文章图片
(来自:University of Washington)
ClearBuds 是华盛顿大学三名研究人员(COVID 大流行期间的室友们)的一个项目成果 。
作为一个开源项目,ClearBuds 旨在通过引入深度学习和音频处理层,来化解这方面的问题 。
【硬件|ClearBuds团队介绍基于实时机器学习的通话音频增强技术】1 - ClearBuds vs Airpods Pro Noise Suppression(via)
可知其系统中包含了一套麦克风系统、以及能够在智能手机上运行的实时机器学习系统 。
尽管大多数耳机仅使用了其中一个耳塞将音频发送到手机,但 ClearBuds 系统却能够发送两路音频流 。
文章图片
通过快速分析和处理,其相关信息能够被用于视频 / 电话呼叫等实时音频的体验改进 。算法会抑制非语音信息,以增强用户通话时的声音 。
Paul G. Allen 计算机科学与工程学院博士生 Maruchi Kim 表示,ClearBuds 有两个关键特性 。
2 - ClearBuds System Overview(via)
首先,这款真无线耳机使用了双麦克风阵列,用于创建两个同步音频流,提供信息并允许我们在更高解析力的空间上分离来自不同方向的声音 。
其次,通过引入轻量级的神经网络,ClearBuds 得以进一步增强通话者的声音 。研究合著者 Ishan Chatterjee 补充道:
文章图片
由于讲述者的声音离两个耳机很近、且距离大致相等,因而神经网络训练可专注于其语音并消除其它背景噪声 。
这种方法与人耳的工作方式非常相似,即利用声音传入左右耳的时间差,来判断声音到底来自哪个方向 。
3 - ClearBuds Background Voice Removal(via)
展望未来,我们希望该研究团队能够很快将 ClearBuds 或其实时机器学习音频增强技术推向市场 。感兴趣的朋友,可移步至该项目的专题页面来获知详情 。
访问:
京东商城
推荐阅读
- 硬件|金士顿推出DataTraveler Max系列高性能USB 3.2 Gen 2闪存盘
- 硬件|NASA揭晓年度摄影师大赛获奖者名单
- 硬件|意法半导体和GlobalFoundries在法国合作建厂 政府将提供资金支持
- 硬件|巴克莱:需求前景疲软 下调AMD与英特尔目标价
- 硬件|国内手机厂商主流手机机型已切换Type-C接口 我国或率先统一快充技术标准
- 硬件|群联正准备多款PCIe 5.0 SSD主控芯片 巅峰速度12GB/s、容量冲上32TB
- 硬件|国内显卡价格集体崩盘 有的已破发33%
- 硬件|印度BIS认证网站曝光疑似Nothing Ear(1) Stick真无线耳机
- 硬件|贴吧最新显卡报价:零售商积极调价清库存 部分SKU跌去6成
- 硬件|群联E26 PCIe 5.0 SSD主控飚速13GB/s 另有4.0版E25/E20新品
