处理激光雷达数据实现目标检测

来源:盖世汽车快讯时间:2022-02-16 13:22:19

激光雷达传感器获取的点云可以绘制三维环境图。这种由距离点组成的“云”提供了大量有价值的环境信息。然而,对于某些应用来说,这些信息过于复杂,无法进一步处理。例如,自动驾驶功能、交通监控或停车点检测,更需要在视野中检测到对象。如何从激光雷达数据中获取这些对象信息?

为了弄清这一点,我们来看一个应用案例:某市正在庆祝一年一度的节日。有一场免费音乐会正在市中心的一个大停车场举行。因为这次活动是免费的,观众入场不受门票的限制。但是,由于安全问题,不允许超过1000人进入。为了确保这一点,该市安装了一个激光雷达传感器,俯瞰音乐会区的入口,追踪从入口经过的人。入口是一条宽阔的通道,游客也可通过该通道离开酒店。

三维数据的精确性和匿名性

这个应用案例与摄像头、运动传感器或人工计数等解决方案相比,激光雷达有几个优势。首先,它能可靠地实时捕捉到场景的细节。例如,几个人同时进入场景时,普通传感器就存在无法准确识别人数的问题。例如,如果有三个人并排走着,那么在外面行走的两个人可能会被传感器捕获到,但中间的人不算在内。其次,激光雷达记录的3D数据与相机图像不同,并没有记录人脸,保护了参加音乐会观众的隐私。

音乐节现场人数如何检测?

开始入场时,许多人涌入现场。在这个过程中,传感器收集数百万条距离数据,对于观众计数应用来说,这些数据过于复杂,无法进一步处理。它们包含每个记录点的x、y和z数据,组成一个点云。然而,主办方并不需要这些详细的信息,而是需要提供给他们用于计算现场观众总数的相关数据信息。必须实时提供三条信息:主办方需要知道有多少人通过入口。软件所识别出来的这些人就是点云中的对象。此外,还需要提供被识别人的确切位置信息。这些人是已经通过入口进到现场内,还是站在边界之外在入口排队?所需的第三项信息是关于人员流动方向的信息。检测到离开现场的人,对应扣除现场观众数量。

需要考虑哪些方面?

这些数据是如何从复杂的点云数据中获得的?为了理解这一点,我们将研究一个简化的数据评估算法。首先,需要区分前景和背景。为此,对场景进行分析并删去背景以识别点簇。为此,在游客到达现场之前,将静态背景记录在点云中。通过记录“现状”,软件可以确定哪些点簇可以被忽略,因为它们是静态的,属于背景。当人们进入现场后,每一幅采集到的图像都会与采集到的背景图像进行匹配,从而检测出相同的目标。

前景

前景和背景

背景

关于点云对象的壳体和边框

当观众到达时,点云会发生变化,这部分会被识别为新的对象。如果这些对象与原来背景图像的比较中不存在,则会识别出运动对象已进入该区域。根据凸包原理,在对象周围绘制一个所谓的边界框。凸壳通过连接物体最外层的点来描述物体的最小周长。边界框将对象包围在尽可能小的长方体中,以便更好地处理信息。采取这些措施是为了减少数据并使其更易于处理。

此边框有助于对目标进行粗略分类。例如,在道路交通中,可以根据此边框来确定检测到的物体是汽车、自行车还是行人。在我们音乐节的例子中,即使现场中不太可能出现自行车或汽车,但是检测边界框的大小有助于将物体归类,更加精确地识别物体是否为人类。因此,根据边框大小将位于入口区域的对象粗略划分到“人类”的类别中,并且确定这些对象的数量。

点云中的人

点云中的人,边框标记

人们会怎样移动?

入口区域内物体的大小被确定了,还缺少关于位置和运动方向的信息。这些数据是如何得出的?首先,可以很容易地从边界框中提取出关于人的确切位置的信息,因为这是激光雷达信息的核心——激光雷达传感器测量距离。

另一方面,例如,可以通过观察先前帧中对象的位置来确定移动的方向。由于帧的生成速率是已知的,因此通过比较多个帧之间对象的位置,很容易确定对象移动的位置和速度。根据这个速度和运动的方向,只要在两个或多个帧中识别出同一点簇,就可以预测目标的进一步路径。

结果:以列表形式呈现

在对象列表中会提供一系列相关信息。表中每行记录检测到的对象及其属性,记录目标对象的大小、位置和移动方向。这种形式的数据很容易进行下一步处理,在音乐会这个例子中,可以确定现场任何时候的确切人数。这使得系统能够识别何时达到最大访客数,禁止观众进入。它也可以准确地检测出什么时候现场人数最多,或者什么时候入口处的人群最多。这些数据可以为之后规划的活动提供一个参考。

处理激光雷达数据,控制游客流量

该市对音乐会现场使用激光雷达的效果非常满意。当访客数量超过900时,我们示例中的软件会触发一个通知给主办方。这使得活动管理部门注意访客数量,提前做好准备,以便让观众停止入场。在剩下的其他时间里,他们可以去做其他事情,或者欣赏乐队演奏的音乐——因为激光雷达在这个过程中可以帮助他们一直关注人流量,为他们节省了大量时间和精力。

关键词:

相关阅读

推荐阅读

信贷创新高 金融数据表现亮眼

信贷创新高 金融数据表现亮眼

2022年开年,金融数据表现亮眼。2月10日,央行发布2022年1月金融统计数据报告。数据显示,1月人民币贷款增加3 98万亿元,创下单月增量历史更多

2022-02-11 10:29:13
循环水高密度养鱼  味美价高省土地

循环水高密度养鱼 味美价高省土地

近日,记者来到位于河池市金城江区九圩镇大村村的陆基圆池循环水养殖基地走访。这里是养鱼基地,但却不见一方鱼塘,放眼望去,只见一个个由更多

2022-02-09 13:53:21
个股逆势上涨  破净股为何成为抗跌的避风港

个股逆势上涨 破净股为何成为抗跌的避风港

市场持续调整,以银行股为代表的破净股出现明显抗跌的情形,甚至有部分个股逆势上涨,其中最大的原因在于这些个股的安全边际较高。一直以来更多

2022-02-09 13:46:11
海目星发布公告:进入未经核实名单无不利影响

海目星发布公告:进入未经核实名单无不利影响

2月8日晚间,海目星(688559)发布公告称,公司关注到美国商务部工业与安全局(BIS)于近日发布了更新的未经核实名单(Unverified List,简称UV更多

2022-02-09 13:44:52
老股东红杉中国持续加码 太极图形完成5000万美元A轮融资

老股东红杉中国持续加码 太极图形完成5000万美元

2月8日,据开源图形基础设施与数字内容创作云平台太极图形官方消息,该公司完成了A轮5000万美元融资。本轮融资由源码资本、GGV纪源资本、BA更多

2022-02-09 13:43:43
*ST新亿连续两个跌停  投资者应提高警惕

*ST新亿连续两个跌停 投资者应提高警惕

公司及实控人被公安立案侦查的消息披露后,*ST新亿(600145)连吃两个跌停,并于1月18日股价跌破1元 股,收于0 97元 股。这也意味着,*ST新亿更多

2022-01-19 12:27:21
资本加速涌入 自动驾驶真的“香”吗

资本加速涌入 自动驾驶真的“香”吗

作为公认的汽车行业的未来,对自动驾驶虎视眈眈的入局者越来越多,资本也在加速涌入。Wayve,一家依靠机器学习为核心科技的英国自动驾驶初更多

2022-01-19 12:26:04
东方锆业披露2021年度业绩预告  现归属净利润约为1.4亿元

东方锆业披露2021年度业绩预告 现归属净利润约

1月18日晚间,东方锆业(002167)披露2021年度业绩预告显示,公司预计报告期内实现归属净利润约为1 4亿元-1 8亿元,同比扭亏。东方锆业表示,更多

2022-01-19 12:25:08
+ 点击查看更多精彩
东北华北黄淮等地有小到中雨 南方局地伴有短时强降水
      中新网4月22日电 据中央气象台网站消息,22日白天,东北地区...
壹图|所谓“保护地球”,其实在拯救人类自己
多地推出义务教育阶段课后延时服务 家长有何期待?
      92 9%受访家长期待落实好学生课后延时服务  对于课后服务...
人脸识别频现雷区 超六成受访者吁健全相关法律法规
      过半受访者对人脸识别技术使用心存疑虑  66 1%受访者呼吁...
    资讯播报