无处不在的机器视觉
无处不在的机器视觉
无人机越来越聪明了！很多使用者都有这样的感慨。从前操作无人机都要小心翼翼，唯恐突遇障碍物挡道，遭遇炸机之惨祸。现在的无人机则完全可以腾挪躲闪，及时回避飞行路径中的各种障碍物，让很多初学者也可以轻易驾驭。
变聪明的无人机有什么秘技吗？答案就是有了机器视觉技术的加持。通过机器视觉技术，无人机不但能感知障碍物，还能知道自己和障碍物的距离，实现精准的避障和绕障。
其定义为：“通过光学的装置和非接触的传感器自动地接收和处理一个真实物体的图像，以获得所需信息或用于控制机器人运动的装置。”
机器视觉常以完整系统形式出现，通常可划分为光学成像、图像传感器、图像处理、io和显示等五大模块。这其中，以全局快门global shutter （以下简称gs）cmos传感器为代表的图像传感器推动了机器视觉系统近几年的大发展。
（图片来源于腾讯视频：思特威global shutter技术与前沿机器视觉应用视频）
正是有了cmos图像传感器，机器视觉早已不再是工业自动化领域的专属名词并已经轻松融入了我们的生活当中，因此也有了“消费级机器视觉”这一新兴领域及概念。比如，进入很多家庭的扫地机器人，配备了机器视觉技术，可以彻底清扫卫生死角。小巧便捷的翻译笔，因机器视觉技术，可以读懂多种语言。而工业自动化生产线上，依然使用机器视觉系统自动完成高度精密的自动化制造及对不良产品的检测等。
而随着ai应用的广泛落地，例如扫脸支付、人脸识别门禁/门锁更是以极快的速度渗透到了人们的工作和生活中。连商场里也不乏智能互动电子屏、智能穿衣镜等基于ai及机器视觉的交互类智能视频设备的身影。
总体来看，cmos图像传感器已借由“消费级机器视觉”的纽带与我们的生活完美契合在了一起。
（图片来源于腾讯视频：思特威global shutter技术与前沿机器视觉应用视频）
cmos传感器的新崛起
cmos是当今主流的图像传感器技术之一，与之对应的是曾经的霸主ccd图像传感器。
1970年，ccd图像传感器在bell实验室发明，cmos图像传感器在nasa的喷气推进实验室jpl制造成功。但是，ccd依靠高量子效率、高灵敏度、低暗电流、高一致性、低噪音等特性，一直成为图像传感器市场的主导，直到90年代末才被cmos拉下神坛。
与ccd图像传感器相对比，cmos图像传感器具有低功耗、低操作电压、片上集成功能、性价比高等优势，但是在初期由于相对较差的性能和较大的像素尺寸，并没有得到重视。后来随着工艺制程水平的不断提高，cmos图像传感器才逐渐开始展现出ccd图像传感器不具有的优势，在图像传感器领域的市场攻城略地。时至今日，手机、相机已经全部沦为cmos传感器的天下。
不过cmos图像传感器却丝毫没有止步的意思。进入21世纪后，随着机器视觉在工业自动化、无人机、智能家电中的应用，cmos图像传感器又迎来了新一轮的发展浪潮。
因为机器视觉的应用特性，cmos图像传感器面临新的挑战。如果以前只是要求成像细致、色彩鲜艳的话，现在则要求快速捕捉（高帧率），无形变（全局快门）和非可见光下成像（近红外增强技术）。毕竟，这次服务的对象从人换成了机器。
gs的引入是一个重大革新。它使得cmos传感器同时曝光来撷取不失真的运动物体图像，这对机器视觉的领域有重大意义。
gs的基本原理是传感器可以同时扫描图像的整个区域。在gs传感器中，使用所有像素同时捕获图像。
举例来说，以前的背照式（bsi）传感器均为卷帘快门，因而会在拍摄高速运动的物体时产生“果冻效应”造成物体严重变形，但拥有全局快门的传感器则能够通过让传感器上的单个像素点在同一时间捕捉到光线信号从而有效解决这一问题。
而最早洞察这一趋势的是一家国内的图像传感器设计公司，思特威在2017年就以前瞻性的眼光开始布局其gs技术的研发，并于2018年就发布了全球首款基于bsi像素工艺的商业级30万像素gs cmos图像传感器——sc031gs，成为率先进入“消费级机器视觉”应用领域的cis企业先锋。
该产品创造性地将bsi像素设计工艺与gs图像传感器设计巧妙结合在一起，提供信噪比更佳、灵敏度更高与动态范围更大的成像性能，可应用于智能读码器设备、无人机、智能模组（gesture recognition/ vslam/ depth information/ optical flow）等诸多图像识别类ai应用领域，而gs cmos传感器也迎来了无比宽广的发展空间。
战略眼光成就gs传感器新贵
作为图像传感器领域的前沿，gs cmos传感器的研发成为了业界关注的焦点。尤其是，高分辨率的gs cmos设计和生产门槛都很高。
可喜的是，以思特威为代表的中国高新cis企业已经在这个领域占据了先机。就在前不久举行的spm 2020思特威合作伙伴大会上，思特威创始人兼董事长兼ceo徐辰博士指出，除了在安防应用领域继续保持领先的市场份额外，思特威早在2017年就布局的消费级global shutter图像传感器市场今年亦收获佳绩，在消费级机器视觉领域出货量跃居全球首位！面对这样的市场成绩，思特威并未停下对gs技术进阶创新的脚步。在spm 2020大会上徐辰博士继而发布了思特威2nd gen smartgs 技术，通过提升pixel size来增加感度和暗光效果，提升率可达30%，另一方面采用并行电压域读取，大大提升了最大快门速度，完善对高速运动物体的清晰抓拍。据介绍，该技术基于全新的电容工艺，其读取噪声可降低一倍以上，同时兼具区域 hdr技术，可大大提升特定位置的动态范围，解决了夜间拍摄信号灯成像过曝等问题，可谓大放异彩。而下一代3rd gen smartgs technology的研发已经在路上，预计将在明年和大家见面。
在尖端gs技术的加持下，思特威今年陆续推出了数款赋能不同机器视觉应用领域的gs产品。如赋能智能驾舱dms系统的全新130w像素全局快门图像传感器——sc133gs，采用2.7μm像素及1/4″光学尺寸，凭借思特威领先的gs技术优势，可以为dms系统及时提供无形变、无伪影的高清可识别影像，为系统进行及时精确的判断提供坚实的基础，有效监测驾驶员驾驶状态，保障行车安全。
（图片来源于思特威sc133gs产品发布新闻）
而在智能交通系统（its）应用领域，思特威今年亦发布了sc410gs，该产品采用400万的bsi像素结合全局快门技术，可精准捕捉快速运动的物体，成像无尾影、不形变，大大提升了智能交通系统对车牌的精准捕捉及高效识别。而在spm 2020大会上，思特威也现场展示了sc410gs覆盖2-4车道的its实际应用演示影像，博得了来宾的一致肯定。
而后续，思特威还将发布面向its应用更高分辨率的sc910gs（即900万bsi与gs技术结合产品）以及在信噪比、高温成像、近红外增强及hdr上全性能升级的sc035hgs（mono/color）产品，赋能更多ai及消费级机器视觉应用终端。
结语
随着硬件方案的不断成熟和运算能力的提升，机器视觉在多个领域应用的广度和深度均在提高。作为核心部件的gs cmos传感器，在设计和工艺不断改进的条件下，还将继续推动机器视觉的应用在各个领域进一步普及，并为人们的生活带来更多智能与美好。
是德科技为采用高通基础设施解决方案的O-RAN无线单元提供验证支持
【虹科案例】 UV-LED固化创新，让产线变得丝滑
电子工程专辑放福利啦！免费领取500本《RT-Thread设备驱动开发指南》
详解类比半导体16~32bits Σ-Δ ADC全系产品
多轴测径仪测量数据更全面
无处不在的机器视觉
人工智能热或在退潮 只有一个半应用赚到钱
ADTRAN推出自动化网络智能产品，实现有效设计和优化接入网络
性价比之王小米MIX，刷上IOS系统之后完虐荣耀8
50瓦特内部总线结构(IBA)电源
屏下指纹真的不安全吗，是否还有被破解的风险
工业4.0的工厂自动化系统通常主要包括三个层级的设备
揭秘苹果的疯狂诈欺术：iPad、iPhone全中招！
买纯电动汽车 应该关注这3点
日海智能:5G模组预计今年8月份量产,打造综合性方案是差异化优势
抗原检测试剂盒自动装配解决方案
荣耀9和荣耀v9区别评测,荣耀9和荣耀v9谁的性价比更高?
MLPerf Inference基准测试结果的第二轮发布
详解物联网时代下的传感器技术动向及布局策略
雷军着急发布5G手机 主要原因是小米在手机市场的表现过于惨淡
无人机越来越聪明了！很多使用者都有这样的感慨。从前操作无人机都要小心翼翼，唯恐突遇障碍物挡道，遭遇炸机之惨祸。现在的无人机则完全可以腾挪躲闪，及时回避飞行路径中的各种障碍物，让很多初学者也可以轻易驾驭。
变聪明的无人机有什么秘技吗？答案就是有了机器视觉技术的加持。通过机器视觉技术，无人机不但能感知障碍物，还能知道自己和障碍物的距离，实现精准的避障和绕障。
其定义为：“通过光学的装置和非接触的传感器自动地接收和处理一个真实物体的图像，以获得所需信息或用于控制机器人运动的装置。”
机器视觉常以完整系统形式出现，通常可划分为光学成像、图像传感器、图像处理、io和显示等五大模块。这其中，以全局快门global shutter （以下简称gs）cmos传感器为代表的图像传感器推动了机器视觉系统近几年的大发展。
（图片来源于腾讯视频：思特威global shutter技术与前沿机器视觉应用视频）
正是有了cmos图像传感器，机器视觉早已不再是工业自动化领域的专属名词并已经轻松融入了我们的生活当中，因此也有了“消费级机器视觉”这一新兴领域及概念。比如，进入很多家庭的扫地机器人，配备了机器视觉技术，可以彻底清扫卫生死角。小巧便捷的翻译笔，因机器视觉技术，可以读懂多种语言。而工业自动化生产线上，依然使用机器视觉系统自动完成高度精密的自动化制造及对不良产品的检测等。
而随着ai应用的广泛落地，例如扫脸支付、人脸识别门禁/门锁更是以极快的速度渗透到了人们的工作和生活中。连商场里也不乏智能互动电子屏、智能穿衣镜等基于ai及机器视觉的交互类智能视频设备的身影。
总体来看，cmos图像传感器已借由“消费级机器视觉”的纽带与我们的生活完美契合在了一起。
（图片来源于腾讯视频：思特威global shutter技术与前沿机器视觉应用视频）
cmos传感器的新崛起
cmos是当今主流的图像传感器技术之一，与之对应的是曾经的霸主ccd图像传感器。
1970年，ccd图像传感器在bell实验室发明，cmos图像传感器在nasa的喷气推进实验室jpl制造成功。但是，ccd依靠高量子效率、高灵敏度、低暗电流、高一致性、低噪音等特性，一直成为图像传感器市场的主导，直到90年代末才被cmos拉下神坛。
与ccd图像传感器相对比，cmos图像传感器具有低功耗、低操作电压、片上集成功能、性价比高等优势，但是在初期由于相对较差的性能和较大的像素尺寸，并没有得到重视。后来随着工艺制程水平的不断提高，cmos图像传感器才逐渐开始展现出ccd图像传感器不具有的优势，在图像传感器领域的市场攻城略地。时至今日，手机、相机已经全部沦为cmos传感器的天下。
不过cmos图像传感器却丝毫没有止步的意思。进入21世纪后，随着机器视觉在工业自动化、无人机、智能家电中的应用，cmos图像传感器又迎来了新一轮的发展浪潮。
因为机器视觉的应用特性，cmos图像传感器面临新的挑战。如果以前只是要求成像细致、色彩鲜艳的话，现在则要求快速捕捉（高帧率），无形变（全局快门）和非可见光下成像（近红外增强技术）。毕竟，这次服务的对象从人换成了机器。
gs的引入是一个重大革新。它使得cmos传感器同时曝光来撷取不失真的运动物体图像，这对机器视觉的领域有重大意义。
gs的基本原理是传感器可以同时扫描图像的整个区域。在gs传感器中，使用所有像素同时捕获图像。
举例来说，以前的背照式（bsi）传感器均为卷帘快门，因而会在拍摄高速运动的物体时产生“果冻效应”造成物体严重变形，但拥有全局快门的传感器则能够通过让传感器上的单个像素点在同一时间捕捉到光线信号从而有效解决这一问题。
而最早洞察这一趋势的是一家国内的图像传感器设计公司，思特威在2017年就以前瞻性的眼光开始布局其gs技术的研发，并于2018年就发布了全球首款基于bsi像素工艺的商业级30万像素gs cmos图像传感器——sc031gs，成为率先进入“消费级机器视觉”应用领域的cis企业先锋。
该产品创造性地将bsi像素设计工艺与gs图像传感器设计巧妙结合在一起，提供信噪比更佳、灵敏度更高与动态范围更大的成像性能，可应用于智能读码器设备、无人机、智能模组（gesture recognition/ vslam/ depth information/ optical flow）等诸多图像识别类ai应用领域，而gs cmos传感器也迎来了无比宽广的发展空间。
战略眼光成就gs传感器新贵
作为图像传感器领域的前沿，gs cmos传感器的研发成为了业界关注的焦点。尤其是，高分辨率的gs cmos设计和生产门槛都很高。
可喜的是，以思特威为代表的中国高新cis企业已经在这个领域占据了先机。就在前不久举行的spm 2020思特威合作伙伴大会上，思特威创始人兼董事长兼ceo徐辰博士指出，除了在安防应用领域继续保持领先的市场份额外，思特威早在2017年就布局的消费级global shutter图像传感器市场今年亦收获佳绩，在消费级机器视觉领域出货量跃居全球首位！面对这样的市场成绩，思特威并未停下对gs技术进阶创新的脚步。在spm 2020大会上徐辰博士继而发布了思特威2nd gen smartgs 技术，通过提升pixel size来增加感度和暗光效果，提升率可达30%，另一方面采用并行电压域读取，大大提升了最大快门速度，完善对高速运动物体的清晰抓拍。据介绍，该技术基于全新的电容工艺，其读取噪声可降低一倍以上，同时兼具区域 hdr技术，可大大提升特定位置的动态范围，解决了夜间拍摄信号灯成像过曝等问题，可谓大放异彩。而下一代3rd gen smartgs technology的研发已经在路上，预计将在明年和大家见面。
在尖端gs技术的加持下，思特威今年陆续推出了数款赋能不同机器视觉应用领域的gs产品。如赋能智能驾舱dms系统的全新130w像素全局快门图像传感器——sc133gs，采用2.7μm像素及1/4″光学尺寸，凭借思特威领先的gs技术优势，可以为dms系统及时提供无形变、无伪影的高清可识别影像，为系统进行及时精确的判断提供坚实的基础，有效监测驾驶员驾驶状态，保障行车安全。
（图片来源于思特威sc133gs产品发布新闻）
而在智能交通系统（its）应用领域，思特威今年亦发布了sc410gs，该产品采用400万的bsi像素结合全局快门技术，可精准捕捉快速运动的物体，成像无尾影、不形变，大大提升了智能交通系统对车牌的精准捕捉及高效识别。而在spm 2020大会上，思特威也现场展示了sc410gs覆盖2-4车道的its实际应用演示影像，博得了来宾的一致肯定。
而后续，思特威还将发布面向its应用更高分辨率的sc910gs（即900万bsi与gs技术结合产品）以及在信噪比、高温成像、近红外增强及hdr上全性能升级的sc035hgs（mono/color）产品，赋能更多ai及消费级机器视觉应用终端。
结语
随着硬件方案的不断成熟和运算能力的提升，机器视觉在多个领域应用的广度和深度均在提高。作为核心部件的gs cmos传感器，在设计和工艺不断改进的条件下，还将继续推动机器视觉的应用在各个领域进一步普及，并为人们的生活带来更多智能与美好。
是德科技为采用高通基础设施解决方案的O-RAN无线单元提供验证支持
【虹科案例】 UV-LED固化创新，让产线变得丝滑
电子工程专辑放福利啦！免费领取500本《RT-Thread设备驱动开发指南》
详解类比半导体16~32bits Σ-Δ ADC全系产品
多轴测径仪测量数据更全面
无处不在的机器视觉
人工智能热或在退潮 只有一个半应用赚到钱
ADTRAN推出自动化网络智能产品，实现有效设计和优化接入网络
性价比之王小米MIX，刷上IOS系统之后完虐荣耀8
50瓦特内部总线结构(IBA)电源
屏下指纹真的不安全吗，是否还有被破解的风险
工业4.0的工厂自动化系统通常主要包括三个层级的设备
揭秘苹果的疯狂诈欺术：iPad、iPhone全中招！
买纯电动汽车 应该关注这3点
日海智能:5G模组预计今年8月份量产,打造综合性方案是差异化优势
抗原检测试剂盒自动装配解决方案
荣耀9和荣耀v9区别评测,荣耀9和荣耀v9谁的性价比更高?
MLPerf Inference基准测试结果的第二轮发布
详解物联网时代下的传感器技术动向及布局策略
雷军着急发布5G手机 主要原因是小米在手机市场的表现过于惨淡