SynSense时识科技展示类脑音频信号处理技术新成果

近日,synsense时识科技发表文章,展示了类脑音频信号处理技术新成果:通过synsense时识科技自研软件rockpool,开发基于脉冲神经网络的信号处理,包括信号处理应用的设计、训练,并部署至synsense时识科技低维度类脑处理器xylo中。研究显示,在执行环境音检测分类任务时,该应用准确率达到了98%,同时仅消耗93微瓦动态功耗(high accuracy: 98% at low power 《100μw inference power)。
“我们展示了基于xylo的超低功耗实时音频信号处理。xylo突破了使用场景中的能耗限制,我们的成果旨在推动类脑处理器以及脉冲神经网络成为商用超低功耗应用以及边缘信号处理应用的绝佳选择。”
dylan muir 全球研发副总裁
“我们还展示了一种简单高效的软件rockpool,旨在简化基于snn的机器学习,可用于信号处理应用的设计、训练,以及部署。对于广大来自神经网络背景的机器学习工程师,不要求具体的脉冲神经网络经验,也可进行脉冲神经网络训练以及部署。”hannah bos 高级机器学习工程师
rockpool是一个开源python软件包,用于开发基于脉冲神经网络的信号处理。rockpool允许网络的构建、训练和测试,以及在事件驱动的神经形态硬件上的仿真。rockpool为图层提供了许多模拟后端,包括brian2,nest,torch,jax,numba和raw numpy。rockpool旨在简化基于snn的机器学习,而非为详细模拟生物网络而设计的。
脉冲神经网络(snn)为时间信号处理提供了一种高效的计算机制,尤其在与snn推理的专用集成电路搭配时,尤其能凸显其能效优势。面向一系列对功耗有着限制的商业应用环境,脉冲神经网络+snn推理的处理器提供了一种适用于商用低功耗信号处理的绝佳方案。环境音检测分类耳机、电话、助听器等便携式音频设备往往通过噪音检测以及声音塑造来提升用户的听觉体验。用于减少噪音的参数可由器件及用户周围的噪音水平及特点而定。例如,噪音过滤会随用户处于安静的环境、车水马龙的街道或嘈杂的咖啡馆中而不同。为了选择并预配置噪音减除方法,synsense时识科技提出了一种低功耗方案,可连续且自动地对用户所处的环境噪音分类。“我们训练一种脉冲神经网络并部署在类脑处理器上,以此进行连续信号的检测。我们使用了qut-noise噪声集来训练及评估这一应用,qut-noise包含了咖啡馆、家、汽车以及街道录音。结果显示,该项应用在准确率、延迟及功耗三大指标中表现更佳(准确率达到了98%,消耗93微瓦动态功耗)。”synsense时识科技展示的rockpool及xylo音频信号处理方案为广大机器学习工程师进行脉冲神经网络配置提供了支持,适用于商用脉冲神经网络应用的设计及部署。自成立以来,synsense时识科技专注于类脑软硬件设计研发,已推出一系列类脑处理器及配套工具链。我们期待脉冲神经网络及低功耗类脑处理器在端侧低功耗机器学习领域作出卓越贡献。
xylo,世界领先的低维度类脑处理器xylo是一款基于第三代人工神经网络的、超低功耗(~0.1mw)的、always-on低维度信号专用的ai处理器。xylo芯片内部集成了模拟前端预处理,可对低维度自然(模拟)信号直接进行进行预处理;内建神经网络,支持脉冲神经网络(snn)和储存池计算技术等;因此xylo特别适合各种mems麦克风、温度传感器、压力传感器、振动传感器、加速度传感器、陀螺仪及肌电、心电等信号的智能处理。


自主品牌燃油车企业绩堪忧 比亚迪叫座不叫好
数字货币未来哪些值得关注
低噪声功率放大器PA441、PA443特性分析
非接触式测温仪表优缺点
iPhone对竞争对手的智能手机设计产生了多大的影响
SynSense时识科技展示类脑音频信号处理技术新成果
电动汽车电池技术为可持续发展的未来注入动力
电流互感器烧毁原因及预防措施
来了!苹果发布iOS 12.1.3系统第三个开发者测试版
国产Model 3“减配”后续 工信部约谈特斯拉并按照有关规定立即整改
深兰科技设计开发出多款嵌入式系统模块
马云无人超市最新消息:马云的无人超市正式迎客,无人超市是否会掀起一场革命?
TLS1.3的正式运行版本,为互联网安全筑起了新的长城
艾迈斯欧司朗推出用于生命体征监测应用的新产品
MOS管涨价最新消息mosfet价格走势长红 Diodes 士兰微等陆续发布涨价通知
iphone8什么时候上市多少钱?iphone8发布会时间确定:四大新功能要逆天了!价格6288起
福特汽车上的新语音控制驾驶助手设备
河北省将加速促进人工智能、区块链技术应用及产业发展
DUCO多可携国内首台25kg协作机器人亮相上海AHTE展
叠层载波调制方法