用于边缘音频和AI的下一代处理器Knowles IA8201

knowles ia8201 音频和 ai 处理器增强了网络边缘的节能智能和隐私。
像往常一样,我对我不知道的事情的数量感到惊讶。例如,您是否听说过一家名为knowles corporation的公司?我必须承认,直到今天早些时候我发现自己在和他们聊天时才知道。
不幸的是,我缺乏知识,因为事实证明它们在声学、软件和信号处理领域非常有名。该公司由 hugh knowles 于 1946 年创立,于 1945 年推出了第一款用于助听器的微型麦克风和接收器。
knowles 继续在麦克风技术方面积累了丰富的专业知识。事实上,在月球上说出的第一句话(“人类迈出的一小步……”)就被传进了诺尔斯的麦克风。
2002 年,knowles 推出了他们的第一代 sisonic mems 麦克风,如今,该公司每年出货数十亿个此类麦克风。事实上,事实证明,坐在我办公室旁边的亚马逊 echo 拥有七个小美女。
问题是世界在不断变化。专注于像麦克风这样的小众技术只能带你走这么远,这解释了为什么 knowles 在 2015 年收购了 audience inc. 数字信号处理 (dsp) 和算法公司。 knowles 的 sisonic mems 麦克风与 audience 的音频处理技术相结合非常适合解决当前对边缘复杂、始终在线、超低功耗语音识别和音频处理的需求。
我之所以在这里讨论这个问题是因为 knowles 发布了 ia8201,这是其 aisonic 音频边缘处理器系列中的最新产品。ia8201 提供强大的语音激活和多麦克风音频处理,针对功耗敏感的应用进行了优化。该处理器具有为当今最先进的消费电子产品执行高级音频输出、上下文感知和手势控制的计算能力。
取样的 ia8201 音频处理器拥有双异构 175-mhz 处理器内核,采用微型 2.6 × 3-mm ewlb 封装和 6.0 × 6.0-mm qfn 封装,具有电压缩放功能。内核实现了低功耗,提供了优化指令和行业兼容性的最佳组合。
ia8201 框图(来源:knowles)
ia8201 包括具有 knowles 专有指令集的高计算 128 位内核 (dmx) 以及 tensilica hifi3 内核 (hmd),两者均具有 knowles 的音频增强功能。dmx 是一种四路浮点 simd 处理器,旨在实现高效的性能计算(例如,波束成形、强插、aec),而 hmd 的目标是高效、低功耗、语音唤醒应用,具有两个路浮点 simd 处理器。两个内核都包含用于 fft、峰值查找和 dnn 的专用加速器。
ia8201 解决方案提供大容量内存 (1.4 mb),其大小适合特定用例,并针对单周期访问和低功耗而设计。这种大内存大小可用于存储各种关键字模型、引擎或其他算法。
丰富的接口选项包括 2 个 i2c、2 个 spi、2 个 uart 和 24 个带中断的 gpio,以支持各种传感器和数据连接,以及 4 个 pdm 输入、2 个 pdm 输出和 3 个 i2s/tdm(四通道)。输入/输出)以支持最多四个麦克风和各种音频连接。
在 ia8201 上处理音频和语音可尽可能长时间地关闭耗电的主机处理器,以延长电池寿命。ia8201 在嘈杂的真实环境中提供更好的远场语音理解和更有效地处理命令。此外,它还支持主机处理器提供的新音频用例,并通过同时感知语音、音频和其他传感器输入,提供更自然的用户体验。
正如我对诺尔斯的人们所说的那样,我个人认为我们不知道哪些产品和功能正在朝着我们的方向发展。我还提到我最近和一个天生失明的朋友聊天。我的朋友告诉我,他可以通过他们在吸收环境声音时投射的“声学阴影”来检测房间中是否有人——并在他们四处走动时跟踪他们。
knowles 的员工回应说,构成他们操作系统基础的 rome 框架对开发人员开放。他们的开放式 dsp 平台(包括一个 sdk)促进了与第三方算法提供商的合作,第三方算法提供商将推出与 ia8201 兼容的关键字模型、各种上下文检测插件以及包括 tensorflowlite 在内的机器学习平台。
就像命运一样,我想我刚刚想出了一个巧妙的想法,将 knowles 麦克风与来自 chirp 的声音数据技术相结合,从而为无数嵌入式开发人员和世界各地的爱好者。关注此空间!

开源办公套件LibreOffice在 7.0 RC中加入了商业化的探索
一文详谈伊辛模型:描述物质的铁磁性
基于NS4205的3W双声道D类音频功放
华为空调产品通过国家3C认证,入局空调领域
是富士康依赖靠苹果,还是苹果依赖富士康
用于边缘音频和AI的下一代处理器Knowles IA8201
台积电7纳米制程与高速运算平台备受市场关注
Lithium-Ion Cell Fuel Gauging
英特尔10纳米可实现多达25%的性能提升
源译识 | 开源许可证第二次译文评审会及相关计划
贴片电感和磁环电感的区别gujing
什么是内存条
电能表自动检测系统的原理及设计
通过英特尔实感技术将播放器置于游戏中
超级计算机榜单重新排名 中国天河二号已沦为世界第二
江淮汽车7月销量达5.06万辆,同比增加15.55%
亚马逊股价创历史新高市值突破8000亿美元 成为全球第二大市值公司
商用机器人怎样布局线下数字化
高频逆变器的工作原理和高低频逆变器的区别介绍
因为iPhone6系列的“节流”“电池”争议苹果在欧洲面临诉讼