基于视觉的驾驶员监控系统获得关注
任何认为基于视觉的驾驶员监控系统 (dms) 是不必要或过时的人都没有关注ee times 报道的近期市场发展。无论是被低估还是被低估——尤其是在美国的汽车制造商和消费者中——这项技术终于开始崭露头角。
我在最近的ee times活动“下一代 ev&av 路线图”上发表了 dms 主题演讲，并使用下面的幻灯片展示了 adas 前置摄像头市场的演变，作为 dms 和未来增长机会的参考。 -客舱监控系统（icms）。
点击查看完整大小的图片
（来源：semicast research）
迄今为止，adas 前置摄像头市场一直由 mobileye 主导，我估计其市场份额约为 60%。mobileye 在 2017 年被英特尔以 153 亿美元的高调收购，但这张幻灯片展示的是在英特尔收购前十年 adas 前向摄像头市场的不起眼的开端。
mobileye 于 2014 年向美国证券交易委员会提交的f-1 表格，以准备在纽约证券交易所上市，现在已成为一份历史文件，但对于像我这样寻求过去精确细节的分析师来说，它提供了大量有用的信息未来的指南。下面是我发现特别有见地的一个页面的屏幕截图。
点击查看完整大小的图片
（来源：美国证券交易委员会备案）
这不仅表明 mobileye 在 2014 年之前已经与汽车制造商 (oem) 建立了广泛的直接关系，而且还与一级供应商建立了直接关系。请注意，在一级供应商名单中，麦格纳名列第一，正如2006 年 8 月的这篇文章所强调的那样，麦格纳是第一个真正掌握 adas 前视摄像头技术所带来的机会的重要性并将其工程实力带入合作伙伴关系的一级供应商与 mobileye。
为什么我要写十五年前的事件？继续阅读，我将解释最近公告的重要性，该公告在nvidia 最近的 2021 年 gpu 技术大会的喧嚣和喧嚣中几乎消失了。
麦格纳进军oms镜面市场
如 seeing machines 的以下幻灯片所示，汽车内部视觉系统市场正在从使用近视场 (nfov) 图像传感器的驾驶员监控发展到使用宽视场的乘员监控系统 (oms) -视野 (wfov) 图像传感器来分析机舱内的所有乘员。
点击查看完整大小的图片
（来源：seeing machines）
与 adas 前置摄像头不同，麦格纳远未成为提供 dms 的第一梯队，已被 aptiv、电装、均胜、lg 电子、三菱、摩比斯和 veoneer 击败以进行批量生产。然而，麦格纳似乎将在 oms 领域抢占其竞争对手的先机，特别是在光学元件和相关电子设备集成在车内后视镜内的系统级解决方案中。
我截取了视频的一帧并将其呈现在下面，它显示了拆卸的镜子，并展示了 cmos 图像传感器和 pcb 与红外 led 发射器和图像处理器的集成。这是一项非凡的工程壮举，由于明显没有风扇来冷却图像处理器，因此更加令人印象深刻。
麦格纳并不是第一个展示带有集成光学组件的车内后视镜的厂商，如下图所示，大陆集团的车内摄像头 (icam) 和 gentex 的车内感应镜展示了这一点。然而，正如它在 adas 前置摄像头市场取得的成就一样，我相信麦格纳现在拥有先发优势，为汽车制造商提供一体化 oms 后视镜解决方案。
虽然我没有看到 magna 的 oms 镜像的技术规格，但我的判断是它很可能结合了来自 omnivision 的 cmos 图像传感器（可能是 2 兆像素的 ov2311）、xilinx fpga（zynq-7000 或 ultrascale+ mpsoc）性能节能的图像处理，使用seeing machines 提供的乘员监控软件。
许多与乘员和驾驶员监控相关的技术问题在最近的ee times关于此主题的小组讨论中进行了详细讨论，其摘要可在此处阅读。
正如我在主题演讲中所讨论的那样，随着 euro ncap 等咨询机构和欧洲通用安全条例等指令要求汽车制造商采用能够可靠监测驾驶员分心、困倦和损伤的技术，dms/oms 的出货量将在这十年中大幅增长。这甚至适用于低成本的大众市场车型，无论车辆是否具有免提驾驶功能，例如通用汽车的 supercruise 或福特的 bluecruise，它们都使用强大的基于视觉的 dms 来准确评估驾驶员的参与度。
将红外光学元件放置在车厢内对于汽车制造商来说是一个艰难但至关重要的决定，对于一级供应商来说也是一项复杂的工程挑战。当前的驾驶员监控实施通常将图像传感器安装在转向柱（凯迪拉克 ct6）、仪表盘（bmw x5）或中控台（斯巴鲁森林人）上。
对于汽车制造商来说，集成必要的红外光学元件和相关电子设备的最简单、最快和最具成本效益的位置是车内后视镜。随着 euro ncap 计划在 2023 年或 2024 年将 dms/oms 测试添加到其 5 星安全评级中，麦格纳最近宣布的完全集成的内部监控镜因此非常重要。
特斯拉重新发明 [oms] 轮子
特斯拉最近一直成为头条新闻，因为它试图重新利用安装在 model 3 和 model y 上的内部摄像头，以提供驾驶员和乘员监控功能。我们可以在这段视频中看到它的更多进展，特别是驾驶员状态分类器的噪音有多大，以及该系统有多容易被照片欺骗。
我们可以礼貌地将特斯拉的 oms 算法描述为处于早期原型阶段，虽然随着车队收集数据可能会有所改进，但出于安全目的，系统的可靠性最终将受到没有红外照明的限制。任何无线更新都无法克服这种设计疏忽，从而防止图像传感器在黑暗中工作，如本视频所示。
既然消费者报告已经证明在特斯拉的 autopilot 中击败基于扭矩的驾驶员监控器是多么容易，其他汽车制造商看起来肯定会与 magna 等一级供应商和 seeing machines 等软件供应商合作，以集成可靠的驾驶员和乘员监控系统正如下面的视频中所讨论的那样，这为道路安全带来了有意义的改善。
任何可以被橙子打败的安全系统都是不安全的。elon musk 和 tesla 会谦虚地承认他们对 dms 和 oms 的重要性的理解是错误的吗？特斯拉一切皆有可能，但在这种情况下，我没有屏住呼吸。对于其他所有人来说，采用强大的驾驶员和乘员监控才刚刚开始。
更快地对高速存储故障深入调试三大步骤
使用差压变送器，这些注意事项你该知道
电池过冲保护电路解析
浅谈WiFi蓝牙数据透传中的优劣
磁带机的倒带速度/读带速度
基于视觉的驾驶员监控系统获得关注
安森美推出5款新的CMOS线性稳压器NCP69x系列产品
基于DM642的I2C模块的正确初始化
AI技术可利用眼动追踪来识别人格特质
一款煤气灶点火器电路
如何入门单片机开发？
三星电子将建立人工智能研究中心，为三大主要业务部门寻找新业务领域
iQOO Z1x 5G流畅先锋燃爆今夏，航海王定制礼盒7月22日开抢
国产存储技术发展迅速实现2.0突破
一种新型无孔Nafion基复合离子交换膜
荣耀9什么时候上市？目标小米6？荣耀9渲染图和配置曝光：荣耀9或将提前发布
走出音箱的误区
Redmi8A将于9月25日发布
苹果自主研发GPU？下一代iphone会更强大？
Molex 和 Microchip Technology Inc合作开发汽车信息娱乐系统
我在最近的ee times活动“下一代 ev&av 路线图”上发表了 dms 主题演讲，并使用下面的幻灯片展示了 adas 前置摄像头市场的演变，作为 dms 和未来增长机会的参考。 -客舱监控系统（icms）。
点击查看完整大小的图片
（来源：semicast research）
迄今为止，adas 前置摄像头市场一直由 mobileye 主导，我估计其市场份额约为 60%。mobileye 在 2017 年被英特尔以 153 亿美元的高调收购，但这张幻灯片展示的是在英特尔收购前十年 adas 前向摄像头市场的不起眼的开端。
mobileye 于 2014 年向美国证券交易委员会提交的f-1 表格，以准备在纽约证券交易所上市，现在已成为一份历史文件，但对于像我这样寻求过去精确细节的分析师来说，它提供了大量有用的信息未来的指南。下面是我发现特别有见地的一个页面的屏幕截图。
点击查看完整大小的图片
（来源：美国证券交易委员会备案）
这不仅表明 mobileye 在 2014 年之前已经与汽车制造商 (oem) 建立了广泛的直接关系，而且还与一级供应商建立了直接关系。请注意，在一级供应商名单中，麦格纳名列第一，正如2006 年 8 月的这篇文章所强调的那样，麦格纳是第一个真正掌握 adas 前视摄像头技术所带来的机会的重要性并将其工程实力带入合作伙伴关系的一级供应商与 mobileye。
为什么我要写十五年前的事件？继续阅读，我将解释最近公告的重要性，该公告在nvidia 最近的 2021 年 gpu 技术大会的喧嚣和喧嚣中几乎消失了。
麦格纳进军oms镜面市场
如 seeing machines 的以下幻灯片所示，汽车内部视觉系统市场正在从使用近视场 (nfov) 图像传感器的驾驶员监控发展到使用宽视场的乘员监控系统 (oms) -视野 (wfov) 图像传感器来分析机舱内的所有乘员。
点击查看完整大小的图片
（来源：seeing machines）
与 adas 前置摄像头不同，麦格纳远未成为提供 dms 的第一梯队，已被 aptiv、电装、均胜、lg 电子、三菱、摩比斯和 veoneer 击败以进行批量生产。然而，麦格纳似乎将在 oms 领域抢占其竞争对手的先机，特别是在光学元件和相关电子设备集成在车内后视镜内的系统级解决方案中。
我截取了视频的一帧并将其呈现在下面，它显示了拆卸的镜子，并展示了 cmos 图像传感器和 pcb 与红外 led 发射器和图像处理器的集成。这是一项非凡的工程壮举，由于明显没有风扇来冷却图像处理器，因此更加令人印象深刻。
麦格纳并不是第一个展示带有集成光学组件的车内后视镜的厂商，如下图所示，大陆集团的车内摄像头 (icam) 和 gentex 的车内感应镜展示了这一点。然而，正如它在 adas 前置摄像头市场取得的成就一样，我相信麦格纳现在拥有先发优势，为汽车制造商提供一体化 oms 后视镜解决方案。
虽然我没有看到 magna 的 oms 镜像的技术规格，但我的判断是它很可能结合了来自 omnivision 的 cmos 图像传感器（可能是 2 兆像素的 ov2311）、xilinx fpga（zynq-7000 或 ultrascale+ mpsoc）性能节能的图像处理，使用seeing machines 提供的乘员监控软件。
许多与乘员和驾驶员监控相关的技术问题在最近的ee times关于此主题的小组讨论中进行了详细讨论，其摘要可在此处阅读。
正如我在主题演讲中所讨论的那样，随着 euro ncap 等咨询机构和欧洲通用安全条例等指令要求汽车制造商采用能够可靠监测驾驶员分心、困倦和损伤的技术，dms/oms 的出货量将在这十年中大幅增长。这甚至适用于低成本的大众市场车型，无论车辆是否具有免提驾驶功能，例如通用汽车的 supercruise 或福特的 bluecruise，它们都使用强大的基于视觉的 dms 来准确评估驾驶员的参与度。
将红外光学元件放置在车厢内对于汽车制造商来说是一个艰难但至关重要的决定，对于一级供应商来说也是一项复杂的工程挑战。当前的驾驶员监控实施通常将图像传感器安装在转向柱（凯迪拉克 ct6）、仪表盘（bmw x5）或中控台（斯巴鲁森林人）上。
对于汽车制造商来说，集成必要的红外光学元件和相关电子设备的最简单、最快和最具成本效益的位置是车内后视镜。随着 euro ncap 计划在 2023 年或 2024 年将 dms/oms 测试添加到其 5 星安全评级中，麦格纳最近宣布的完全集成的内部监控镜因此非常重要。
特斯拉重新发明 [oms] 轮子
特斯拉最近一直成为头条新闻，因为它试图重新利用安装在 model 3 和 model y 上的内部摄像头，以提供驾驶员和乘员监控功能。我们可以在这段视频中看到它的更多进展，特别是驾驶员状态分类器的噪音有多大，以及该系统有多容易被照片欺骗。
我们可以礼貌地将特斯拉的 oms 算法描述为处于早期原型阶段，虽然随着车队收集数据可能会有所改进，但出于安全目的，系统的可靠性最终将受到没有红外照明的限制。任何无线更新都无法克服这种设计疏忽，从而防止图像传感器在黑暗中工作，如本视频所示。
既然消费者报告已经证明在特斯拉的 autopilot 中击败基于扭矩的驾驶员监控器是多么容易，其他汽车制造商看起来肯定会与 magna 等一级供应商和 seeing machines 等软件供应商合作，以集成可靠的驾驶员和乘员监控系统正如下面的视频中所讨论的那样，这为道路安全带来了有意义的改善。
任何可以被橙子打败的安全系统都是不安全的。elon musk 和 tesla 会谦虚地承认他们对 dms 和 oms 的重要性的理解是错误的吗？特斯拉一切皆有可能，但在这种情况下，我没有屏住呼吸。对于其他所有人来说，采用强大的驾驶员和乘员监控才刚刚开始。
更快地对高速存储故障深入调试三大步骤
使用差压变送器，这些注意事项你该知道
电池过冲保护电路解析
浅谈WiFi蓝牙数据透传中的优劣
磁带机的倒带速度/读带速度
基于视觉的驾驶员监控系统获得关注
安森美推出5款新的CMOS线性稳压器NCP69x系列产品
基于DM642的I2C模块的正确初始化
AI技术可利用眼动追踪来识别人格特质
一款煤气灶点火器电路
如何入门单片机开发？
三星电子将建立人工智能研究中心，为三大主要业务部门寻找新业务领域
iQOO Z1x 5G流畅先锋燃爆今夏，航海王定制礼盒7月22日开抢
国产存储技术发展迅速实现2.0突破
一种新型无孔Nafion基复合离子交换膜
荣耀9什么时候上市？目标小米6？荣耀9渲染图和配置曝光：荣耀9或将提前发布
走出音箱的误区
Redmi8A将于9月25日发布
苹果自主研发GPU？下一代iphone会更强大？
Molex 和 Microchip Technology Inc合作开发汽车信息娱乐系统