亚利桑那大学开发出新方法 可为深度学习应用自动生成雷达摄像头数据集

来源:盖世汽车时间:2022-03-01 11:13:49

近年来,机器人专家和计算机科学家一直在开发范围广泛的系统,以检测环境中的物体并进行相应的导航。而这些系统中的大多数都是基于在大型图像数据集上训练的机器学习和深度学习算法构建。虽然现在有大量用于训练机器学习模型的图像数据集,但包含雷达传感器收集数据的数据集仍然很少,尽管雷达相对于光学传感器具有显著优势。此外,许多可用的开源雷达数据集很难适用于多种用户应用程序。

据外媒报道,亚利桑那大学(University of Arizona)的研究人员最近开发出一种新方法,可以自动生成包含标记雷达数据摄像头图像的数据集。该方法使用摄像头图像流上(又称YOLO)的高精度目标检测算法和关联技术(又称匈牙利算法)来标记雷达点云。

(图片来源:Sengupta)

亚利桑那大学的博士生和此项研究的主要研究员Arindam Sengupta表示:“使用雷达的深度学习应用需要大量标记的训练数据,而标记雷达数据并非易事。该方法主要通过手动将其与并行获得的图像数据流进行比较来完成,是一个极其耗时且劳动密集型的过程。我们的想法是,如果摄像头和雷达在查看同一个物体,那么我们可以利用基于图像的物体检测框架(在案例中又称YOLO)来自动标记雷达数据,而非手动查看图像。”

Sengupta及其同事称该方法的三个特征是协同校准、聚类和关联能力。该方法可对雷达及其摄像头进行共同校准,以确定雷达检测到物体的位置使如何根据摄像头的数字像素进行转换的。

Sengupta表示:“我们使用基于密度的聚类方案(DBSCAN)来检测和消除噪声/杂散雷达回波;以及将雷达回波分离成簇以区分不同的物体;最后,使用帧内和帧间匈牙利算法(HA)进行关联。该帧内HA将YOLO预测与给定帧内的协同标定雷达簇相关联,而帧间HA在连续帧中关联与同一目标相关的雷达簇,以便即使在光学传感器间歇失效的情况下也能在帧中标记雷达数据。”

未来,该新方法可以帮助自动生成雷达摄像头和仅雷达数据集。此外,该团队还探索了基于雷达摄像头传感器融合方法和仅由雷达收集数据的概念验证分类方案。

Sengupta表示:“我们还建议使用有效的12维雷达特征向量,结合空间、多普勒和RCS统计数据构建,而不是传统使用点云分布或微多普勒数据。”

最终,Sengupta及其同事的研究可为快速调查和训练开辟新的可能性,以使用传感器融合对基于深度学习的模型进行分类或跟踪。这些模型可助力提高从自动驾驶汽车到小型机器人等众多机器人系统的性能。

关键词: 亚利桑那大学 自动生成雷达摄像头数据集 深度学习应用

相关阅读

推荐阅读

信贷创新高 金融数据表现亮眼

信贷创新高 金融数据表现亮眼

2022年开年,金融数据表现亮眼。2月10日,央行发布2022年1月金融统计数据报告。数据显示,1月人民币贷款增加3 98万亿元,创下单月增量历史更多

2022-02-11 10:29:13
循环水高密度养鱼  味美价高省土地

循环水高密度养鱼 味美价高省土地

近日,记者来到位于河池市金城江区九圩镇大村村的陆基圆池循环水养殖基地走访。这里是养鱼基地,但却不见一方鱼塘,放眼望去,只见一个个由更多

2022-02-09 13:53:21
个股逆势上涨  破净股为何成为抗跌的避风港

个股逆势上涨 破净股为何成为抗跌的避风港

市场持续调整,以银行股为代表的破净股出现明显抗跌的情形,甚至有部分个股逆势上涨,其中最大的原因在于这些个股的安全边际较高。一直以来更多

2022-02-09 13:46:11
海目星发布公告:进入未经核实名单无不利影响

海目星发布公告:进入未经核实名单无不利影响

2月8日晚间,海目星(688559)发布公告称,公司关注到美国商务部工业与安全局(BIS)于近日发布了更新的未经核实名单(Unverified List,简称UV更多

2022-02-09 13:44:52
老股东红杉中国持续加码 太极图形完成5000万美元A轮融资

老股东红杉中国持续加码 太极图形完成5000万美元

2月8日,据开源图形基础设施与数字内容创作云平台太极图形官方消息,该公司完成了A轮5000万美元融资。本轮融资由源码资本、GGV纪源资本、BA更多

2022-02-09 13:43:43
*ST新亿连续两个跌停  投资者应提高警惕

*ST新亿连续两个跌停 投资者应提高警惕

公司及实控人被公安立案侦查的消息披露后,*ST新亿(600145)连吃两个跌停,并于1月18日股价跌破1元 股,收于0 97元 股。这也意味着,*ST新亿更多

2022-01-19 12:27:21
资本加速涌入 自动驾驶真的“香”吗

资本加速涌入 自动驾驶真的“香”吗

作为公认的汽车行业的未来,对自动驾驶虎视眈眈的入局者越来越多,资本也在加速涌入。Wayve,一家依靠机器学习为核心科技的英国自动驾驶初更多

2022-01-19 12:26:04
东方锆业披露2021年度业绩预告  现归属净利润约为1.4亿元

东方锆业披露2021年度业绩预告 现归属净利润约

1月18日晚间,东方锆业(002167)披露2021年度业绩预告显示,公司预计报告期内实现归属净利润约为1 4亿元-1 8亿元,同比扭亏。东方锆业表示,更多

2022-01-19 12:25:08
+ 点击查看更多精彩
东北华北黄淮等地有小到中雨 南方局地伴有短时强降水
      中新网4月22日电 据中央气象台网站消息,22日白天,东北地区...
壹图|所谓“保护地球”,其实在拯救人类自己
多地推出义务教育阶段课后延时服务 家长有何期待?
      92 9%受访家长期待落实好学生课后延时服务  对于课后服务...
人脸识别频现雷区 超六成受访者吁健全相关法律法规
      过半受访者对人脸识别技术使用心存疑虑  66 1%受访者呼吁...
    资讯播报