采用FPGA的嵌入式视觉技术

自驾车商机诱人,驱动传统车厂与物联网厂商跨界抢进,更加速人工智能(ai)、先进驾驶辅助系统(adas)发展愈趋白热化。而嵌入式视觉也搭上ai与adas发展的顺风车,成为实现自驾车发展不可或缺的关键技术,为了要满足嵌入式视觉技术的灵活度,低延迟、低功耗与低成本的要素缺一不可。
赛灵思(xilinx)机器学习资深产品营销经理罗霖谈到,在ai高速发展状况下,对嵌入式视觉的asic芯片开发带来巨大挑战,从传感器搜集道路行驶资料、基于深度学习感知执行路径规画,甚至是提供自动煞车的过程,所需的延迟必须小于100ms,且其中牵涉到许多散热挑战,要求芯片功耗需小于5w。此外,该技术对于成本相对敏感,要求主芯片价位范围介于10~40美元之间。
赛灵思机器学习资深产品营销经理罗霖认为,低延迟、低功耗与低成本是打造嵌入式视觉不可或缺的关键要素。
相较之下,采用fpga支持嵌入式视觉技术,更具可编程的弹性。罗霖分析,虽然采用asic开发嵌入式视觉具备成本与功耗优势,但在ai与深度学习时代,创新的技术或应用不断发生,每天都有新的深度神经网络(dnn)出现,而这些神经网络本身是变种、无标准性,也没有标准化的算法。在此前提下,车厂会要求每个月升级一次神经网络,升级的神经网络不仅改变权重,还包含整体网络结构与网络计算颗粒度,变更范围非常广。
此外,由于dnn的趋势发展下,相机对于分辨率要求的规格也快速改变,为了因应不同分辨率,提供不同接口支持也成为嵌入式视觉关注的一大重点,相比于asic固定式的设计,fpga可提供弹性化的i/o接口,也成为嵌入式视觉开发的一大卖点。
虽然fpga具备弹性、可扩充性的优势,但一直以来为人诟病的地方就在于复杂的软件定义编程、函式库与架构上的挑战。为了解决这项痛点,赛灵思发布revision stack平台,提供验证过并定义完成的基础平台,开发工程师仅须选用开发工具、架构与函式库,即可快速进入机器学习应用,有效降低fpga开发门坎。
整体而言,赛灵思汽车产品营销经理孙蕾蕾表示,赛灵思fpga与soc优点是可以用到汽车不同应用,包含前端、雷达与光达应用,其延迟相较于cpu和gpu都还来得低。凭借着xilinx本身fpga具备的低延迟、低功耗的性能条件,近期在车用领域已与许多车厂及物联网厂商合作,包含戴姆勒、mobilieye和百度等公司,主要透过ai技术提供前置摄影机、驾驶侦测与自动停车等应用。

康卡斯特希望通过引入软件将比特币或以太网的节点结合起来运行
防止电池被假冒--选择能提供所需精度,防止克隆、黑客攻击的电量计IC
控制电路图
原来比荣耀8更强更美的是它!双胞胎之战鹿死谁手
新能源汽车高压配电箱总成的主要功能
采用FPGA的嵌入式视觉技术
谷歌AI发布新成果TF-Ranking:基于TensorFlow的可扩展库
核电站工作原理 核电站是核聚变还是核裂变
三种常见的电平转换方案
全新推出的Codasip Studio Mac版本为RISC-V处理器带来更多的差异化设计潜力
骁龙855可能会改名成8150,不会集成5G基带
5G信号怎么跑?5G会威胁气象预报准确性吗?
国轩高科生产的磷酸铁锂电池产品获得了进入船舶行业的准入证书
阻抗分析仪HP4291A HP4291A HP 4291B
NN模型在金融风控场景中的应用
如何通过全场景芯片布局支撑未来汽车中央计算平台架构
那些得过设计奖的智能手机,你知道吗?
科亿科技基于昇腾平台打造出工业视觉智能分选解决方案
Speos数字视觉与监控:机器视觉Camera应用
便携式心电信号测量仪的研制