苹果、 Google牵头, 5G 后的下一个竞争点是相机应用?
天风国际分析师郭明錤在昨天预测 2020 年的新 iphone 会用上 5g，如今他再次发出报告，表示这款新 iphone 除了会沿用结构光，还会后置 tof（time of flight）传感器。
无独有偶，google 也在今天凌晨公布了 pixel 4 的产品预告片，预示这款新机将支持准确的人脸识别。与此同时，借助一组全新的识别传感器，用户甚至还能对手机进行「no hands」隔空操作。
苹果、google 两个硅谷巨头几乎同时释出相机升级的信号，这是否意味 5g 后的下一个竞争点是相机应用？
在 iphone 加入 tof 和 pixel 加入新模组后，他们又会给我们带来哪些体验上的变化？
苹果的 tof，是 ar 娱乐的另一步棋
回想起苹果会用 tof 取代结构光的事，早在去年就已经流传。当时为了对比结构光和 tof 之间的差别，我还专门在 mwc 2018 的一篇报道里做过数据对比和猜想。
现如今所传的苹果在后置相机中加入 tof，我认为是提升 iphone 相机功能性的做法，因为有了 tof 识别，这个镜头能做到的就不只是拍照这么简单了。
不过请注意，郭明錤并没有在报告中表示苹果会用 tof 来取代前置结构光，而是在后置相机中加入这个功能，因此 2020 年的 iphone 将会是双识别方案：
一组是目前我们在 iphone x 使用的结构光，一种是新加入的后置 tof。
tof 虽然也是基于近红外光原理进行识别，但和结构光不同的地方在于，tof 是通过计算每个红外点的反射时间去进行即时计算，基于对反射时间的识别，手机能获得手机与对象之间的距离和深度信息，并获得 3d 图像信息。
而结构光则是先投射上万个红外点，然后计算每个红外点的发射深度，根据当前物体的特征进行识别。
当然，尽管 tof 在某些方面比结构光更显优势，但这并不代表 tof 能完全取代结构光，毕竟目前苹果对结构光的调校已经相对成熟，短期内该技术在行内依然能保持较大竞争力。
更何况，苹果对新功能一贯都是以「先小规模试用，再大规模部署」的节奏开发，因为除了要考虑到供应链的供货能力以外，还要考虑对 tof 的调校。
所以这似乎能解释苹果为何会考虑把 tof 放在后置，而不是使用频率更高的前置部分。
那么在 tof 加入 iphone 以后，它能给我们带来哪些新体验？对于这个问题，我想到了几种可能：
首先是 ar。
一说起 tof 我就想起了 ar，因为它是最能体现 tof 优势的功能之一。tof 有两个结构光所不能及的优点：
一个是测量距离达到了 3 米；一个是多 10 倍的测量点，对远距离物体的测量精度更高。基于这两个优点，iphone 实现更有意思的 ar 互动娱乐功能。
通俗来说，就是变成一台类似于微软 kinect 的主机，只不过你现在能把它放在口袋里了。
在去年的 mwcs 2018 里，我看到 vivo 展出了一台 tof 手机，这台手机被横置架了起来，vivo 的工作人员在用体感控制屏幕上的滑雪游戏，而且我们也能看到画面和动作几乎能做到同步追踪。
由此可见，tof 游戏在目前已经具备可行性，而且游戏体验也已经达到接近体感设备的水平。
不过要说用 tof 来玩游戏，现在看来似乎还有些长远，毕竟这并不是单凭苹果一己之力就能去实现，但 tof 的初期阶段我认为和苹果一直在深造的 ar 离不开关系：
借助 tof 的远距离 3d 测距，手机能实现全身的物体和动作识别。
比如通过软件「创造」一件钢铁侠的盔甲，我可以通过 ar 进行试穿；比如可以扫描房间创造虚拟环境，通过这个虚拟环境进行设计和创造。
另外，用户还能通过 tof 扫描出虚拟世界里的自己，在虚拟世界中创建一个 ar 角色。
这些功能都可以赋予苹果 ar 功能更大的娱乐性和实用性，今天我们能用 ar 来测量物体大小，明年我们或许就能用手机把眼前的物体统统扫描进去了。
除了 ar，tof 的另一个作用是人像拍摄辅助。
借助 tof 对物体进行测距、识别，这个方法我们早在华为 p30 pro 和 oppo r17 pro 两款手机中就已有所见闻。其原理也是通过 tof 广布点、距离长的特性，对人物细节进行精准识别，比如飘扬的发丝、打着 v 手势的手指、头顶上的饰品……
当然，tof 的作用也不只是用于人物拍摄，通过 3d 测距的结果和手机的虚化算法，相机能拍摄出比传统 2d 算法更自然、精准，接近大光圈镜头的成像效果。
这让我想起了之前写过关于 pixel 3 人像模式优化的解读文章，相信在 tof 的 3d 测绘支持下，手机的背景虚化效果会比现在更精准和自然。
根据郭明錤预测，2020 年有三款 iphone 将配备结构光系统，而其中两款将加入 tof 功能，形成结构光 + tof 的双方案搭配。
郭明錤认为，后置 tof 功能主要是帮助苹果改善 iphone 的成像质量和 ar 应用体验，其出货量在 2020 年将有望达到 7500 万至 8000 万部。
能识别人脸的 pixel，可以用手势操作的 pixel
google 在这次公布的 pixel 4 预告片中透露着两个重要信息：
手机能进行人脸识别
用户能隔空操作
其实说来也是有趣，相比起其他厂商极力把新品消息保密起来，google 则是反其道而行，主动放出新品消息来吊大家的胃口，这次公布的图片和视频主要透露了 pixel 4 在人脸识别方面的设计和功能。
这些传感器分别是红外摄像头、前置相机、光距传感器、soli 雷达、点阵投射器、另一枚红外摄像头和泛感光元件。被设计在居中的是椭圆形的听筒，因此我们也能预见 google 这次仍然不会在 pixel 4 打出「屏占比」这张牌。
至少，小尺寸的 pixel 4 会继续保持常规屏幕的设计。
有着一套基于红外线的检测系统，pixel 4 将具备和 iphone x 一样的人脸识别能力。但在这套传感器中，我认为最亮眼的其实是其他手机没有配备的 soli 雷达，这也是让 pixel 4 支持手势操作的核心元件。
project soli 最早是在 2016 年的 google i/o 大会登场，2017 年开始提供开发者测试。起初 project soli 是一门被设计在智能手表和音箱内的手势操作技术，用户能在 15 米内用手势对设备进行控制。
而 soli 雷达则是 project soli 的核心，通过这个毫米波雷达，手机能感知到用户的动作。
相对于前面 tof 的光学原理，soli 的是基于反射毫米波进行动作信息传输，对比结构光和 tof，soli 不会受使用场景光线的影响且元件较为简单，并具备可穿透特性。
但由于毫米波在远距离反射时易受空气干扰，会使得识别精度大幅削弱、功耗增加，而且 soli 也对物体的 3d 识别存在局限性，因此目前 soli 更适合是作为近距离的手势识别传感。
所以，这次 pixel 4 所搭载的是「红外+soli」的模组，红外模组负责人脸检测，soli 雷达负责处理手势操作，比如最原始的解锁、系统操控，进阶的快捷控制、ar 游戏，我们都可能会用到它。
值得一提的是，为了避免人脸识别系统会出现之前尴尬的「种族歧视」问题，google 曾用过 5 美元一次的「有偿录入」方法，在大街上随机收集路人的人脸数据，从而对不同人种、肤色、性别的人脸进行识别能力优化。
外媒 the verge 向 google 证实了这则消息，并得到官方更详细的回复：
虽然样本本身不能匿名（指人脸数据），但我们会为每位测试者生成了一个编号，并与其邮箱进行绑定。google 将会保留这些面部数据 18 个月，目的是作为人脸识别方面的研究和优化。当然，参与者也能要求 google 删除参与研究的人脸数据。
另外，google 还在博客中重申了人脸数据和 soli 数据的安全性，无论是人脸还是手势，这些信息都只会保存在本地的 titan m 安全芯片，永远不会上传到 google 的服务器和保存。
来自一个镜头的新趋势
对于科技行业来说，5g 的到来是 2019 年的大事件，但在 5g 到来后该如何运用，其实大家目前除了知道速度比 4g 速度更快以外，也没有一个更具象的感觉。
苹果这次给出的苗头是「识别」技术，当然这个「识别」肯定不只是为了让解锁时间从 1 秒缩减为 6 毫秒，而是更复杂的 3d 测绘和 ar。
尽管 iphone 将用 tof 的消息只是来自于郭明錤的观察，但我们也不排除苹果在 ar 方面的野心。自 2017 年开始，苹果就一直重视 ar 在 ios 设备上的应用，不但用 arkit 方便了开发者的开发流程，并且还在 app store 大力推广 ar 程序。
而在 5g 这个节点上，更高速的网络会助推 ar 迅速生长，tof 所起到的就是丰富 ar 功能和体验的重要作用。
在线的 ar 游戏、在线试衣、ar 即时社交……
google 的 soli 虽然没有 tof 的功能那么惊艳，但实际上经过 google 近三年时间的发展，这个功能也已经被不少开发者「层层挖掘」，成为一个颇有意思的实用功能。
比方说，在驾车时通过手势快捷拨打电话；通过软件编程，打造出一架隔空钢琴；通过模拟旋钮的手势，去调整手机播放音量。
甚至乎，即便是不方便触控手机屏幕的残疾用户，也能通过 soli 手势去操控手机，实现科技服务于人的最大价值。
总之，无论是 iphone 的 tof 还是 pixel 的 soli，这些都是值得我们期待的新功能，尽管在今天看来他们的作用还是有点虚幻，但有着苹果和 google 两家企业牵头，或许他们会在明年给我们带来意想不到的惊喜。
Redmi K40系列新品发布会如约而至
英特尔发布神经计算棒，连接U盘就能使用AI加速器
中国尽快将5G芯片商用推向市场
自制搭棚电子管前级方法
电磁兼容中EMI骚扰源产生的条件和特征
苹果、 Google牵头, 5G 后的下一个竞争点是相机应用?
SIAF 2023更多优质展商确认参展 全面聚焦前沿自动化技术
多屏显示讲解
8月22日|泰克云上大讲堂—半导体可靠性热载流子效应测试详解
设计一个节约端口线器件的新型键盘的详细资料概述
超级电容器与传统电容器的区别
120W x 3通道D类功放制作,D类功放制作实例
未来智能硬件的发展
华为开发者大会2022，肺功能评估及慢阻肺研究即将正式上线
基于555芯片的直流调光灯电路设计
生成式AI的I/O瓶颈，或许可以用光子IC来突破
高效交流输入激光驱动电源 AAS-XA-XV系列
iQOO手机拆评：iQOO手机真的有热管吗？iQOO手机的天线有缩水吗？
触动中国心 爱国者数码相机触控拍摄新品亮相
未来机器人推出智能机器人，可胜任AI助理工作
无独有偶，google 也在今天凌晨公布了 pixel 4 的产品预告片，预示这款新机将支持准确的人脸识别。与此同时，借助一组全新的识别传感器，用户甚至还能对手机进行「no hands」隔空操作。
苹果、google 两个硅谷巨头几乎同时释出相机升级的信号，这是否意味 5g 后的下一个竞争点是相机应用？
在 iphone 加入 tof 和 pixel 加入新模组后，他们又会给我们带来哪些体验上的变化？
苹果的 tof，是 ar 娱乐的另一步棋
回想起苹果会用 tof 取代结构光的事，早在去年就已经流传。当时为了对比结构光和 tof 之间的差别，我还专门在 mwc 2018 的一篇报道里做过数据对比和猜想。
现如今所传的苹果在后置相机中加入 tof，我认为是提升 iphone 相机功能性的做法，因为有了 tof 识别，这个镜头能做到的就不只是拍照这么简单了。
不过请注意，郭明錤并没有在报告中表示苹果会用 tof 来取代前置结构光，而是在后置相机中加入这个功能，因此 2020 年的 iphone 将会是双识别方案：
一组是目前我们在 iphone x 使用的结构光，一种是新加入的后置 tof。
tof 虽然也是基于近红外光原理进行识别，但和结构光不同的地方在于，tof 是通过计算每个红外点的反射时间去进行即时计算，基于对反射时间的识别，手机能获得手机与对象之间的距离和深度信息，并获得 3d 图像信息。
而结构光则是先投射上万个红外点，然后计算每个红外点的发射深度，根据当前物体的特征进行识别。
当然，尽管 tof 在某些方面比结构光更显优势，但这并不代表 tof 能完全取代结构光，毕竟目前苹果对结构光的调校已经相对成熟，短期内该技术在行内依然能保持较大竞争力。
更何况，苹果对新功能一贯都是以「先小规模试用，再大规模部署」的节奏开发，因为除了要考虑到供应链的供货能力以外，还要考虑对 tof 的调校。
所以这似乎能解释苹果为何会考虑把 tof 放在后置，而不是使用频率更高的前置部分。
那么在 tof 加入 iphone 以后，它能给我们带来哪些新体验？对于这个问题，我想到了几种可能：
首先是 ar。
一说起 tof 我就想起了 ar，因为它是最能体现 tof 优势的功能之一。tof 有两个结构光所不能及的优点：
一个是测量距离达到了 3 米；一个是多 10 倍的测量点，对远距离物体的测量精度更高。基于这两个优点，iphone 实现更有意思的 ar 互动娱乐功能。
通俗来说，就是变成一台类似于微软 kinect 的主机，只不过你现在能把它放在口袋里了。
在去年的 mwcs 2018 里，我看到 vivo 展出了一台 tof 手机，这台手机被横置架了起来，vivo 的工作人员在用体感控制屏幕上的滑雪游戏，而且我们也能看到画面和动作几乎能做到同步追踪。
由此可见，tof 游戏在目前已经具备可行性，而且游戏体验也已经达到接近体感设备的水平。
不过要说用 tof 来玩游戏，现在看来似乎还有些长远，毕竟这并不是单凭苹果一己之力就能去实现，但 tof 的初期阶段我认为和苹果一直在深造的 ar 离不开关系：
借助 tof 的远距离 3d 测距，手机能实现全身的物体和动作识别。
比如通过软件「创造」一件钢铁侠的盔甲，我可以通过 ar 进行试穿；比如可以扫描房间创造虚拟环境，通过这个虚拟环境进行设计和创造。
另外，用户还能通过 tof 扫描出虚拟世界里的自己，在虚拟世界中创建一个 ar 角色。
这些功能都可以赋予苹果 ar 功能更大的娱乐性和实用性，今天我们能用 ar 来测量物体大小，明年我们或许就能用手机把眼前的物体统统扫描进去了。
除了 ar，tof 的另一个作用是人像拍摄辅助。
借助 tof 对物体进行测距、识别，这个方法我们早在华为 p30 pro 和 oppo r17 pro 两款手机中就已有所见闻。其原理也是通过 tof 广布点、距离长的特性，对人物细节进行精准识别，比如飘扬的发丝、打着 v 手势的手指、头顶上的饰品……
当然，tof 的作用也不只是用于人物拍摄，通过 3d 测距的结果和手机的虚化算法，相机能拍摄出比传统 2d 算法更自然、精准，接近大光圈镜头的成像效果。
这让我想起了之前写过关于 pixel 3 人像模式优化的解读文章，相信在 tof 的 3d 测绘支持下，手机的背景虚化效果会比现在更精准和自然。
根据郭明錤预测，2020 年有三款 iphone 将配备结构光系统，而其中两款将加入 tof 功能，形成结构光 + tof 的双方案搭配。
郭明錤认为，后置 tof 功能主要是帮助苹果改善 iphone 的成像质量和 ar 应用体验，其出货量在 2020 年将有望达到 7500 万至 8000 万部。
能识别人脸的 pixel，可以用手势操作的 pixel
google 在这次公布的 pixel 4 预告片中透露着两个重要信息：
手机能进行人脸识别
用户能隔空操作
其实说来也是有趣，相比起其他厂商极力把新品消息保密起来，google 则是反其道而行，主动放出新品消息来吊大家的胃口，这次公布的图片和视频主要透露了 pixel 4 在人脸识别方面的设计和功能。
这些传感器分别是红外摄像头、前置相机、光距传感器、soli 雷达、点阵投射器、另一枚红外摄像头和泛感光元件。被设计在居中的是椭圆形的听筒，因此我们也能预见 google 这次仍然不会在 pixel 4 打出「屏占比」这张牌。
至少，小尺寸的 pixel 4 会继续保持常规屏幕的设计。
有着一套基于红外线的检测系统，pixel 4 将具备和 iphone x 一样的人脸识别能力。但在这套传感器中，我认为最亮眼的其实是其他手机没有配备的 soli 雷达，这也是让 pixel 4 支持手势操作的核心元件。
project soli 最早是在 2016 年的 google i/o 大会登场，2017 年开始提供开发者测试。起初 project soli 是一门被设计在智能手表和音箱内的手势操作技术，用户能在 15 米内用手势对设备进行控制。
而 soli 雷达则是 project soli 的核心，通过这个毫米波雷达，手机能感知到用户的动作。
相对于前面 tof 的光学原理，soli 的是基于反射毫米波进行动作信息传输，对比结构光和 tof，soli 不会受使用场景光线的影响且元件较为简单，并具备可穿透特性。
但由于毫米波在远距离反射时易受空气干扰，会使得识别精度大幅削弱、功耗增加，而且 soli 也对物体的 3d 识别存在局限性，因此目前 soli 更适合是作为近距离的手势识别传感。
所以，这次 pixel 4 所搭载的是「红外+soli」的模组，红外模组负责人脸检测，soli 雷达负责处理手势操作，比如最原始的解锁、系统操控，进阶的快捷控制、ar 游戏，我们都可能会用到它。
值得一提的是，为了避免人脸识别系统会出现之前尴尬的「种族歧视」问题，google 曾用过 5 美元一次的「有偿录入」方法，在大街上随机收集路人的人脸数据，从而对不同人种、肤色、性别的人脸进行识别能力优化。
外媒 the verge 向 google 证实了这则消息，并得到官方更详细的回复：
虽然样本本身不能匿名（指人脸数据），但我们会为每位测试者生成了一个编号，并与其邮箱进行绑定。google 将会保留这些面部数据 18 个月，目的是作为人脸识别方面的研究和优化。当然，参与者也能要求 google 删除参与研究的人脸数据。
另外，google 还在博客中重申了人脸数据和 soli 数据的安全性，无论是人脸还是手势，这些信息都只会保存在本地的 titan m 安全芯片，永远不会上传到 google 的服务器和保存。
来自一个镜头的新趋势
对于科技行业来说，5g 的到来是 2019 年的大事件，但在 5g 到来后该如何运用，其实大家目前除了知道速度比 4g 速度更快以外，也没有一个更具象的感觉。
苹果这次给出的苗头是「识别」技术，当然这个「识别」肯定不只是为了让解锁时间从 1 秒缩减为 6 毫秒，而是更复杂的 3d 测绘和 ar。
尽管 iphone 将用 tof 的消息只是来自于郭明錤的观察，但我们也不排除苹果在 ar 方面的野心。自 2017 年开始，苹果就一直重视 ar 在 ios 设备上的应用，不但用 arkit 方便了开发者的开发流程，并且还在 app store 大力推广 ar 程序。
而在 5g 这个节点上，更高速的网络会助推 ar 迅速生长，tof 所起到的就是丰富 ar 功能和体验的重要作用。
在线的 ar 游戏、在线试衣、ar 即时社交……
google 的 soli 虽然没有 tof 的功能那么惊艳，但实际上经过 google 近三年时间的发展，这个功能也已经被不少开发者「层层挖掘」，成为一个颇有意思的实用功能。
比方说，在驾车时通过手势快捷拨打电话；通过软件编程，打造出一架隔空钢琴；通过模拟旋钮的手势，去调整手机播放音量。
甚至乎，即便是不方便触控手机屏幕的残疾用户，也能通过 soli 手势去操控手机，实现科技服务于人的最大价值。
总之，无论是 iphone 的 tof 还是 pixel 的 soli，这些都是值得我们期待的新功能，尽管在今天看来他们的作用还是有点虚幻，但有着苹果和 google 两家企业牵头，或许他们会在明年给我们带来意想不到的惊喜。
Redmi K40系列新品发布会如约而至
英特尔发布神经计算棒，连接U盘就能使用AI加速器
中国尽快将5G芯片商用推向市场
自制搭棚电子管前级方法
电磁兼容中EMI骚扰源产生的条件和特征
苹果、 Google牵头, 5G 后的下一个竞争点是相机应用?
SIAF 2023更多优质展商确认参展 全面聚焦前沿自动化技术
多屏显示讲解
8月22日|泰克云上大讲堂—半导体可靠性热载流子效应测试详解
设计一个节约端口线器件的新型键盘的详细资料概述
超级电容器与传统电容器的区别
120W x 3通道D类功放制作,D类功放制作实例
未来智能硬件的发展
华为开发者大会2022，肺功能评估及慢阻肺研究即将正式上线
基于555芯片的直流调光灯电路设计
生成式AI的I/O瓶颈，或许可以用光子IC来突破
高效交流输入激光驱动电源 AAS-XA-XV系列
iQOO手机拆评：iQOO手机真的有热管吗？iQOO手机的天线有缩水吗？
触动中国心 爱国者数码相机触控拍摄新品亮相
未来机器人推出智能机器人，可胜任AI助理工作