leddar pixset是业界首款可用于高级辅助驾驶系统(adas)和自动驾驶(ad)研发的公开数据集,数据来自完整的传感器套件(摄像头、激光雷达、毫米波雷达、imu),包括来自3d固态闪光式(flash)激光雷达(lidar)的全波形数据。
据麦姆斯咨询报道,全球高级辅助驾驶系统(adas)和自动驾驶(ad)技术领导者leddartech于2021年2月24日对外宣布了其首款用于adas和ad研发的公开传感器数据集——leddar pixset。该数据集在业内也属首次推出,包含了来自leddartech的3d固态flash激光雷达leddar pixell的全波形数据。leddartech将免费提供给学术研究用户。
为了实现最优的自动驾驶性能,往往需要多种传感器,带来的挑战是如何有效利用来自不同传感器的数据。传感器融合技术被广泛用于提高计算机视觉算法的性能和鲁棒性。如pixset之类的数据集,让从事adas和ad技术的学术团队和工程研究团队能够基于现有的传感器数据集进行测试、开发高级软件并运行仿真,而无需组装新的传感器套件以重新收集数据集。
传感器套件包括:一台3d固态flash激光雷达leddar pixell,一台64线机械式扫描激光雷达,3颗90度摄像头,1颗180度immervision全景摄像头,一台77~79 ghz调频连续波雷达,一颗带双gps rtk天线的惯性测量单元(imu)
测试车辆配置了完整的传感器套件,用于数据集开发。在车辆密度高的城市、郊区和高速公路上运行并记录了各种场景数据。通过运行于各种天气(例如晴天、阴天、雨天)和光照(例如白天、黑夜、黄昏)条件,进一步增强了数据。pixset可提供各种情况下的信息,并创建出用于adas和ad的真实数据。
数据集主要功能:
- 来自自动驾驶汽车综合传感器套件的数据
- 来自3d flash激光雷达的全波形数据
- 97个序列,包含29k帧,并带有超过130万个3d框注释
- 各种环境、天气条件和一天里不同时间段
- 开源应用程序编程接口(api)和数据集查看器
pixset由leddartech与位于美国硅谷的deepen ai合作开发,提供全面的对象注释。新的数据集具有全波形激光雷达数据集,为3d计算机视觉提供了超越激光雷达点云的机会,已经发布于leddartech网站(www.leddartech.com)。
数据集定义了行人、汽车、交通标识、交通灯、锥形交通路标、障碍物等22种对象。每个带注释的对象都有一个唯一的id,该id跨帧维护,允许跟踪算法的开发和基准测试。此外,还为每个对象提供了附加属性。所有对象的3d注释框在序列的持续时间内都有一个固定的尺寸,不过行人除外,这是因为行人的形状在不同帧之间可能有所不同。行人的位置(手臂和腿部)会影响边界框的大小。因此,确定边界框变量的大小就解决了这个问题,可以为训练和推论提供更好的精度。
数据集定义的22种物体
在不同场景和天气条件的数据集示例:左侧图像来自摄像头,右侧带有3d框的图像来自激光雷达
“leddartech一直致力于自动驾驶的发展。随着pixset的发布,我们又朝着这一梦想的实现迈进了一步。通过向科学和学术界免费提供数据集,leddartech用实际行动支持并鼓励自动驾驶和其它需要激光雷达技术的应用发展。”leddartech首席技术官pierre olivier说道。
“精确注释的数据是自动驾驶汽车技术发展的关键,也是实现更高安全性道路的重要一步。为自动驾驶汽车集成deepen ai的注释功能和leddartech的环境感知平台,pixset可提供一系列高质量的数据集,以推动该领域向前发展。”deepen ai创始人兼首席执行官mohammad musa评论道。
关于leddartech
leddartech成立于2007年,已发展成为一家全面的端到端的环境感知企业,保证客户能够解决汽车和移动市场整个价值链中的关键传感和感知挑战。凭借其leddarvision传感器融合和感知平台,以及基于leddarengine的车规级固态激光雷达的经济高效、可扩展且多功能的激光雷达开发解决方案,leddartech让tier 1和tier 2汽车系统集成商能够开发出完整、适用于level 1~5级自动驾驶的全堆栈感知解决方案。这些解决方案已积极部署于自动驾驶班车、卡车、公交车、送货车、智能城市、智慧工厂和自动驾驶出租车等应用。leddartech正致力于最先进的汽车和移动遥感应用领域的多项创新,拥有95多项专利技术(已授予或正在申请)以提高ad和adas性能。
尖端可穿戴式与传感器技术,可窥见医疗保健的未来
Everspin和Globalfoundries将其MRAM协议扩展到12nm工艺
智慧农业架构解读
变频远程监测控制系统在油田中研究与应用
iPhone13Pro Max和iPhone12Pro Max哪个更好
首款用于ADAS和AD研发的公开传感器数据集——Leddar PixSet
引线框架类封裝介绍
路坦力、英伟达、纳多德强强联合携手打造数字新引擎
小米MIX对战iPhone7 Plus!五大对比
云计算时代 传统服务器如何逆市突围
面对AirPods霸权!Bragi无奈退出可穿戴设备市场
拉绳位移传感器应用范围越来越广,我们该如何选择
小米众筹佳尼特智能净水器高清图赏
中国大陆将如何复制台湾晶圆制造业的成功
中国成功发射天通一号03星
5G专网部署需权衡多方面因素
张江春运“前线”的AI产品总结
3D打印新技术可在皮肤上打印传感器
全面介绍微电子封装技术
【米尔瑞萨RZ/G2L开发板-试用体验】创建TCP服务器