三大场景快速落地 瑞芯微在AI领域的表现亮眼

自alphago 在2016年战胜李世石之后,面世超过半个世纪的人工智能(以下简称ai)终于进入了飞速发展期。一大波做ai芯片、ai算法、应用和相关服务的公司拔地而起,站在2019年年底往回看, ai已在智能安防、智能零售和智能家居等场景中快速普及,势必将成为2020年ai产业链全球最热三大关键词。
ai现状:三大场景快速落地
ai技术首先在智能安防、智能零售和智能家居三大领域落地,与这些场景的现状和市场需求有密切的关系。
首先看智能安防,中国产业信息网的数据显示,在国内到2020年预计将接近1万亿元。在这个产值暴增背后,我们看到了庞大的数据本地处理需求和识别需求,这就需要安防硬件架构的升级。据ihs markit在其《智能视频监控发展趋势》报告中所说,智能安防架构往“云边端”是产业的必然发展趋势,被称作端的摄像头通过嵌入ai,极大减轻了云端的负载的操作者负担。这也正是为什么ai首先在智能安防领域大规模落地的原因。
再看智能零售,据市场机构数据显示,预计到2026年全球智能零售规模将达到588亿美元。这个由电商巨头亚马逊推向巅峰的应用场景“无人商店”,现如今基于智能技术的无人新型零售服务,已遍地开花。以无人货架、无人货柜、自助贩卖机、人脸识别支付设备等为形态的产品,借助人工智能、物联网和摄像头等科技助力各大商超实现智慧零售。
而智能家居应用方面,其范畴不再仅限于家庭娱乐,智能安防、家居语音控制、各类智能家电、人脸识别设备等在智能家居升级中的作用将越来越重要。
以上三种场景的爆发性增长就带来了相关边缘端ai芯片的需求。而从目前看来,以上场景的需求在未来几年将会持续攀升,如何打造满足现在及未来需求的ai芯片,就成为企业必须紧跟的目标。而国内的芯片供应商福州瑞芯微电子(简称“瑞芯微”)正是当中的先行者。
瑞芯微:国产ai芯片的先行者,rk3399pro及rk1808 ai旗舰芯表现亮眼
近年来,瑞芯微持续深耕ai市场,根据市场研究公司compass intelligence 2018年发布的全球人工智能芯片企业排名榜单显示,在国内人工智能芯片领域,瑞芯微已跃升第二,仅位于华为海思之后。能获得这样的表现,主要得益于其rk3399pro和rk1808这两颗人工智能旗舰芯片的强势表现。
官方资料显示,rk3399pro这颗ai芯片采用双核cortex-a72+四核cortex-a53的big.little大小核cpu架构,芯片在整体性能、功耗方面具技术领先性。同时,芯片还集成了四核的arm高端gpu mali-t860,进一步提升了芯片在图形处理方面的能力。
更值得一提的是,rk3399pro还内置了性能高达3.0tops、融合了瑞芯微rockchip在机器视觉、语音处理、深度学习等领域的多年经验打造的npu,让典型深度神经网络inception v3、resnet34、vgg16等模型在其上的运行效果表现出众,性能大幅提升。
据介绍,作为瑞芯微首颗采用cpu+gpu+npu硬件结构设计的ai芯片,rk3399pro ai芯片具备以下三大特性:
1、ai硬件性能高
rk3399pro采用专有ai硬件设计,npu运算性能高达3.0tops,高性能与低功耗指标均大幅领先:相较同类npu芯片性能领先150%;相较gpu作为ai运算单元的大型芯片方案,功耗不到其所需的1%。
2、平台兼容性强
rk3399pro的npu支持8bit与16bit运算,能够兼容各类ai软件框架。现有ai接口支持openvx及tensorflowlite/androidnn api,ai软件工具支持对caffe/tensorflow模型的导入及映射、优化。
3、完整方案易于开发
rockchip基于rk3399pro芯片提供一站式ai解决方案,包括硬件参考设计及软件sdk,可大幅提高全球开发者的ai产品研发速度,并极大缩短产品上市时间。
这些性能使得rk3399pro能被快速应用于智能驾驶、图像识别、安防监控、无人机、语音识别等各ai应用领域。
rk1808则是瑞芯微采用22nm fd-soi工艺打造的aiot芯片。这个芯片最为突出的特点在于能提供高达3.0top的npu峰值算力的同时,还拥有了比其他对手更低的功耗。据介绍,相同性能下,rk1808的功耗相比主流28nm工艺产品可降低30%左右;内置2mb系统级sram,可实现always-on设备无ddr运行;具有硬件vad功能,支持低功耗侦听远场唤醒。
rk1808内置的npu还支持int8/int16/fp16混合运算,最大程度兼顾性能、功耗及运算精度;支持tensorflow/mxnet/pytorch/caffe等一系列框架的网络模型转换,兼容性强。
同时,rk1808拥有的丰富外设接口能便于应用扩展,视频支持mipi/cif/bt1120输入,支持mipi/rgb显示输出;具有pwm/i2c/spi/uart等一系列传感器输入输出接口;具有usb3.0/usb2.0/pcie等高速设备接口,支持千兆以太网及外置wifi/bt模块;音频支持麦克风阵列输入,同时支持音频输出。
rk1808的高算力、低功耗特性、及针对性aiot接口设计让其更好地实现语音唤醒、语音识别、人脸检测及属性分析、人脸识别、姿态分析、目标检测及识别、图像处理等一系列功能,可广泛应用于安防、教育、清扫、车载、穿戴、家电、存储等各场景中。
为了帮助合作伙伴快速落地ai应用,瑞芯微还发布rknn-toolkit、人工智能软件开发工具包rock-x sdk。
据官方资料介绍,通过rknn-toolkit,开发者可以完成tensorflow、caffe、pytorch、mxnet等模型的转换、量化、性能profile、内存耗费统计等任务,快速将ai模型部署到嵌入式硬件平台上;而rock-x sdk则是基于rk3399pro/rk1808的一组快捷ai组件库,初始版本包括:人脸检测、人脸识别、活体检测、人脸属性分析、人脸特征点、人头检测、人体骨骼关键点、手指关键点、人车物检测等功能,开发者仅需要几条api调用即可在嵌入式产品中离线地使用这些功能,而无需关心ai模型的部署细节,极大加速了产品的原型验证和开发部署。
瑞芯微携手合作伙伴实现丰富ai场景落地
回首瑞芯微过去多年的发展,除了性能优越的芯片外,瑞芯微另一件引以为傲的“武器”就是他们联手合作伙伴快速落地的能力。在很多厂商还在处于发布芯片,苦苦找寻场景的时候,瑞芯微已经在多个市场取得了不错的成绩。
年初的mwc 2019上,全球3d智能视觉(3d vision intelligence)领域的领先企业盎锐科技就发布了基于瑞芯微rockchip rk3399pro+rk1608的all in one一体化3d智能视觉开发平台。这个平台包括了3d结构光(前)及tof(后)模组,深度整合盎锐科技的unre 3d senz引擎,实现对人脸/物体的精准扫描、3d重建、物体丈量等功能,为3d视觉应用行业提供turnkey一站式软硬件3d智能视觉解决方案,为多样化的应用场景提供支持。
全球领先的手势识别技术提供商usens凌感针对智能家居、安防、车载领域推出基于瑞芯微tb-rk3399pro开发平台的手势识别解决方案,将usens的红外双目硬件fingo和rk3399pro结合,配备2个红外摄像头,使得手势具有了深度信息,可以对三维的手势进行追踪,大大扩展了应用范围,满足对手势有三维要求的场景。
开发者及合作伙伴基于rk1808实现客流统计、物体识别和异常行为分析等功能,并将其落地到商场超市、公共场所如地铁/商场/火车站/社区、智能家居家电等场景。rk1808具备的边缘ai能力,让开发者能够直接在本地处理、存储和分析大量原始数据,基于其高算力,实现基于边云协同的智能优化,确保实时、智能、安全、隐私。
基于rk1808,瑞芯微还推出具备强大深度学习推理能力的rk1808人工智能计算棒。支持 pc、工控机、机器人等硬件平台,它的学习能力可以用于物体检测/识别、自然语言理解等,在家电、机器人、新零售、工业视觉、虚拟现实、增强现实、安防、教育、车载、穿戴、物流等各场景中,便捷地位为开发者提供强大的算力与深度学习推理能力。

便携式农产品农药残留检测仪器HM-NY06的性能描述
一文看懂计算机执行程序的过程
紫光与光宝联手,计划2018实现国产3D闪存SSD量产
什么是温度振动一体传感器?
开关电源的常见故障及其修复方法
三大场景快速落地 瑞芯微在AI领域的表现亮眼
智慧农业是如何利用智能制造促进的
有源滤波器设计实验
苹果iPhone 12有望使用802.11ay Wi-Fi标准
一带一路,中国海外轨道交通重点项目全盘点
石墨烯色水凝胶条纹可作动态条形码标签防伪应用
黑莓舍弃手机切入汽车行业,QNX就是它的王牌
努比亚N3惊艳发布 续航表现非常出色
引领新潮流,智能会议平板实现无线办公
机车空调逆变电源控制系统及其实现
关于主动安全系统的分析介绍和应用
FPGA中的晶振大小多少比较合适?为什么会用到两个晶振?
豪威集团和Tobii在眼动追踪领域携手推进Metaverse视觉解决方案
三星Galaxy S4最详细的物料成本:超高的零部件自给率
快讯:孟晚舟未能获释 SpaceX首次载人火箭发射延期