高通AI启示录,从一篇数学物理基础论文说起

高通ai启示录,从一篇数学物理基础论文说起
qualcomm成功的秘诀是什么?
qualcomm——高通,移动互联网时代最成功的公司。
一代代旗舰芯片和移动平台,更是安卓手机厂商核心竞争力和卖点之一。
但成功的花儿,外界更多看到花开时的艳丽,鲜能关注绽放前的艰辛。
所以最近一篇ai论文发布后,意外引起论文之外的讨论。
中国俗语:台上一分钟,台下十年功。
如果说移动时代的成功“秘诀”太难追,那这篇论文展示的,正是高通面向ai时代的“十年功”管窥。
一篇基础理论的ai论文
这篇引发思考的ai论文,全名:gauge equivariant convolutional networks and the icosahedral cnn.
中文翻译:《规范等变卷积网络与二十面体cnn》。
主题高深,着力点又极其基础——把数学、物理方面的基础理论,用在卷积神经网络(cnn)攻坚中。
概括而言,之前的卷积神经网络主要被用于平面问题,而且不具有旋转不变性。
但高通的这项新研究,可以基于规范等变cnn的方法来实现一个尼曼三维任意曲面的旋转不变性,这不仅是cnn模型新突破,而且结果可以用在全球气候模式、医疗影像的研究上。
论文作者也非泛泛之辈。
taco cohen和max welling(韦灵思),均来自高通ai研发团队。其中,韦灵思教授是深度学习领域知名科学家、变分自动编码器(vae)的提出者,还是诺贝尔物理学奖得主gerardus’t hooft和图灵奖geoffrey hinton的学生。
这篇论文,可以说是韦灵思教授等集师承之所长的结果。
于是从论文本身到作者背景,立马在ai科研圈引发反响:
推特上,转发超过300,点赞数1千2——作为这样一篇看懂标题都不易的论文,足见其影响了。
更主要的是,高通ai研究院展开如此基础的研究,令不少人感到震惊。
一般而言,企业内部的研究院,虽然也会偏向学术式推进,但会偏重企业的侧重所在。
比如高通这样的公司,或通信或芯片,或者移动基础架构。
但韦灵思等大牛的研究,更基础更理论,并看不出限制。
这还不是孤立事件,稍早之前,韦灵思教授等还将广义相对论和量子场论的数学原理应用到深度学习中,提供了3d物体识别的新思路。
更早之前,还在神经网络压缩、机器学习训练工具等基础方面展开攻坚。
所以也有人评价说,高通深厚的专利和技术壁垒背后,正是提前对上述看似无用的基础研究的持续投入。
而等到oem厂商争相搭载骁龙芯片时,这些隐而不彰的基础成就,虽然无迹可寻,但实际早已春风化雨。
高通ai生态
高通内部支持上述基础理论研究,彰显着高通对ai变革趋势的判断,也是面向新时代的适者生存。
至少目前对外宣示的是这样:
除了优势所在的手机终端,还正在把势能延伸向物联网、汽车,渗透到更多的端、边缘,最终结合云端,让ai等新技术无处不在。
越来越多智能传感器,也正在让数据呈现大爆炸之势。
于是ai走向边缘、走向iot终端,开始呼之欲出。目之所及,扫地机器人、安防摄像头、交通信号灯,包括汽车等等,都到了需要一颗“芯”的时候。
这不正是高通所长吗?
在今年的高通人工智能开放日上,高通也在iot和汽车领域大秀肌肉,吸引众多目光。
在其发展战略中,把汽车视为智慧城市、智慧基础设施中的一环,包括道路在内就有无数传感器,都在为智能汽车服务。
高通希望车与车、车与智能交通设施完全连接,形成一张v2x的巨大信息网,所有联网共享的设备可以实时共享数据,而ai可以让这些数据得到最好的运用。
在开放日现场最吃香的是一个专为司机提供的智能数字座舱,第三代骁龙数字座舱平台为ai添加了人性化特色,不仅在用户看不见的智能驾驶芯片和算法中,在车内的增强现实抬头显示(hud)、虚拟助理等方面,也能让用户直接感受到ai的强大,可以为驾乘人员打造突破性的全新体验。
实际上,智能数字座舱也最能体现ai时代的高通将往何处去。
在整个场景下,骁龙820a平台提供了技术基础,第三代骁龙汽车平台集成多核高通人工智能引擎ai engine,拥有高通安全处理单元(spu),以及高通视觉增强高精定位和计算机视觉处理能力,能够一系列ai基础能力,但进一步延展开来的还有语音交互、ai视觉等方面的诸多能力。
你可以将“数字座舱”与“手机”相类比,只是前者类似的场景,比手机多得多——甚至目前还难以穷尽,这是一个完全增量的市常
所以回过头来看,高通在去年11月建立的1亿美元ai风险投资基金,所投方向涉及自动驾驶汽车、机器人、计算机视觉以及物联网等领域,野心也便再清晰不过。
手机依然是主战场
不过,手机依然最大智能终端。
或者说在ai时代,智能手机会真正被ai赋予“智能”能力。
2018年的骁龙820开始,高通的旗舰芯片就已经在全面集成高通自研人工智能引擎ai engine。
今年的异构多核旗舰移动平台骁龙855集成了最新的高通第四代人工智能引擎ai engine,所谓异构计算就是由cpu、gpu、hexagon不同功能的核心发挥各自所长,而又相互协作,共同实现高效的ai处理。
高通骁龙855芯片中,adreno 640 gpu、hexagon 690处理器和kryo 485 cpu相互协作,通过异构计算智能分配ai任务,相比前代实现了整体ai性能3倍的提升。
其中hexagon 690新增的hexagon张量加速器(hexagon tensor accelerator,hta)功不可没。
张量运算是ai算法中的基础操作,pc和云计算厂商近年来引入张量计算单元为ai加速。该张量加速器是qualcomm自主设计、面向更多ai处理的硬件核心。
hexagon张量加速器的加入对手机行业意义重大,它不仅使数字信号处理的功能得到扩展,还让开发者实现可编程的ai加速。ai如今已经成为高端智能手机的核心卖点。
时代也正在发生这样的变化:
仅有ai硬件的升级远远不够,还需要有软件开发商的支持,才能发挥出高通第四代人工智能引擎的运算潜能。
在软件框架层面,骁龙855底层硬件支持tensorflow、pytorch、onnx等主流机器学习平台,以及google nn api等运行软件框架,让开发者充分利用ai特性,围绕高通人工智能引擎ai engine,打造覆盖范围最广的ai生态系统。
同样在高通ai开放日现场,去除噪点、实时翻译语音、手势识别等实际应用,都是ai带来的新变化。
曾经在pc上需要大量资源才能运行的图像、语音处理模型,如今在手机上也能轻松运行。
而且ai也让高通的生态空前庞大,商汤、旷视和虹软等ai独角兽也都纷纷参与到高通ai朋友圈中,基于芯片和软件支持平台,最后推出更丰富的ai应用和场景化落地。
基础研发启示录
所以归根结底,无论是手机方向上的努力,还是更宏大的ai生态蓝图。
这篇高通ai基础论文背后的启示,早已再清晰不过。
如果不在基础研发下苦功,任何领先和生态,都只会是窒息一常
所谓台上一分钟,台下十年功。
之前太多羡慕高通移动时代的话语权之强大,但鲜有背后研发投入和基础苦功的阐释表达。
现在,这篇引起学界一番热议的论文,恰似一个注脚,能够解释高通之所以引领了一个时代的核心原因。
也是值得更多拥有宏图梦想的ai公司们学习的原因。

一款新型霍尔板在推杆电机上的运用
达孚电子为你详细介绍交流陶瓷安规电容器
国芯思辰|漏电检测芯片CN54123可兼容M54123L用于漏电保护器
微波射频电路杂波干扰问题技术分析及改进研究
全屏手机不再是小米唯一,这几款全屏手机将不输给小米MIX
高通AI启示录,从一篇数学物理基础论文说起
都是高性价手机:小米6、荣耀9、华为mate9和一加5,你会选择谁?
明基LX700激光商务投影仪评测 投影效果出色办公效率强大
企业采用智能门禁系统,可体现出行业高度
三星希望通过新商标背后的技术来消除屏幕门效应
用Python实现3D地图教程
魅族首款双摄手机是它 砍腰圆键回归小圆点?
外骨骼辅助双足行走机器人:带轮子也可以上楼梯
交换机安全设置功能
中国汽车不乏优秀品牌,比亚迪唐何以成为担当?
Oculus Go正在开发无控制器模式,仅需凝视即可启动APP
格力进军手机市场,线上结合线下拓展销售渠道
英国Pickering公司公布三管齐下方案 应对产品淘汰问题
或门芯片 或门芯片74ls系列
STM32中断,看着一篇就够了
s