天天资讯:引领新趋势,鉴智机器人推出双目立体视觉智能驾驶系统
2023年注定是充满变化与革新的一年。年初特斯拉大降价引发行业巨震,而后国内从新势力车企到3月份的燃油车降价潮,都在进一步考验着整车成本,行业性价比比拼进入关键期;与此同时,随着奔驰基于前向双目的Drive Pilot率先落地L3级自动驾驶,智能驾驶加速“进阶”,高阶智能驾驶的快速落地也迎来关键节点。
相关热点新闻背后,是智能汽车整体的趋势:汽车硬件成本会越来越便宜,智能软件的价格越来越贵。
「特斯拉硬件与软件价格趋势对比」图源:鉴智机器人
(资料图)
在这种背景下,行业必须思考:什么方案能支持智驾持续发展,以更具性价比的方式,实现性能更优、功能更可靠的智驾?
一个核心破局思路在传感器端。行业需要配置稳定,信息涵载完备,可以大规模量产的传感器配置方案。
相比其他传感器,视觉传感器具有信息涵载完备、硬件成本低的固有优势,但其信息为间接表示,对算法和算力的挖掘要求极高,这既是行业难点、也是技术壁垒。
2023年3月23-24日,在2023光谷人工智能产业生态大会——智能网联汽车专场,鉴智机器人联合创始人兼CTO都大龙表示,基于这一洞察,鉴智机器人自成立伊始,以终为始,通过基于AI算法与视觉传感器的软硬协同优化,构建以视觉3D理解为核心的智能驾驶系统“双目立体视觉智能驾驶系统”,为车企提供高性能、高性价比、极具差异性的系统方案,满足车企在智能化下半场的综合诉求。
都大龙 | 鉴智机器人联合创始人兼CTO
以下是演讲内容整理:
为什么用“双目”研发智驾系统?
视觉路线在信息涵载方面具有显著优势,视觉传感器作为核心感知部件也已成为业界共识。不过,一直以来业内都有着单目、双目等路线的比较和探讨。
图源:鉴智机器人
对比单目,双目立体视觉传感是生物学亿年进化并最终与现实世界自洽的结果。左/右目投影成像与视差之间构建了一种自监督的约束模式,使之能与物理世界的三维信息关联,并持续自适应学习,从而赋能机器人与自动驾驶在现实世界中自如活动的能力。双目立体视觉对比单目还有以下重大优势:
双目立体视觉对现实世界的感知,具有物理学定律支持的真3D信息提取能力。
人和动物之所以能产生立体的感知,本质上是因为左/右目或不同时刻对同一物体看到的图像有所差异,这种差异以视差进行描述,而视差基于三角测量原理即可得到深度。由于视差获取是通过左/右目图像的差异计算的,仅与图像像素级的相似度有关,并不依赖高层语义信息,因此可以直接解决当前自动驾驶“先识别再检测”(非标障碍物检测)的问题,可以处理非标物体和路况。与传统基于启发式规则计算左/右目图像匹配以获取视差的方式不同,鉴智机器人采用基于学习的AI对左/右目以及时序图像进行时空匹配,不仅大大提升了3D/4D感知的性能,而且能够以数据驱动的方式不断学习进化。
「鉴智机器人双目视觉雷达输出的RGBD深度点云图」图源:鉴智机器人
数据闭环是自动驾驶的发动机,双目立体视觉可以大大提升自动驾驶3D/4D数据闭环的性能和效率。
为了解决自动驾驶多传感器后融合后处理所面临的语义理解天花板问题,即通过启发式规则对不同传感器的感知结果进行融合,难以解决类似大车截断等问题,业内提出了基于学习的端到端bev 3D/4D感知方案,将启发式规则用AI学习的方法替代,从而大大提升了自动驾驶语义理解的天花板。但同时也对数据闭环真值系统提出了更高的要求,即3D/4D感知系统所需要的真值获取成本往往是非常高的,距离、速度、光流、场景流等信息人工难以标注。依赖激光雷达进行3D/4D真值获取的方式不仅与视觉难以自洽,而且难以解决数采与量产的鸿沟(量产车型绝大多数并不配置激光雷达)。双目立体视觉由于具备更精准、更稳定、泛化能力更强的稠密3D描述信息,可以以更低的门槛、更高的效率构建更高精度的3D/4D重建,从而得以构建更高效能和效率的3D/4D数据闭环系统。
「鉴智机器人双目智驾系统输出的4D重建效果」图源:鉴智机器人
双目智驾系统有何技术门槛?
当前,双目立体视觉已从最初的“小众路线”走向大众:2021年起前装搭载车型便不断增加,从多为豪华品牌车型到如今成为越来越多自主品牌新车的“标配”:诸如吉利领克009、北汽极狐阿尔法S、五菱Kiwi等车型,均选择双目立体视觉作为前向主传感器。
鉴智机器人通过双目传感器和智能驾驶算法的软硬协同优化,已经显著提升了智能驾驶的智能程度、安全性、舒适性,可以提供极具差异性的智能驾驶功能。与之相应的是,双目智驾系统的实现从硬件到算法再到量产都有着极高的技术门槛:
硬件门槛:车载双目相机需要在整车10年30万公里的生命周期内维持高稳定性,需要光学部件、结构及材料、生产工艺、图像做全栈软硬件协同优化;
性能门槛+算法门槛:在满足车载可布置空间尺寸限制下,通过超分辨率视差计算方案实现百米外的车辆、行人、以及非标障碍物的高精度测距;高帧率、高精度、稠密深度估计,在成本可控的嵌入式计算平台实现产品化;利用AI学习范式解决弱纹理、重复纹理场景视差匹配精度的问题,同时基于数据驱动不断提升时空层面的视差精度;
量产门槛:产线标定方案需要结合相机硬件特性做全栈自研,生产节拍可根据整车生产节拍定制;在线自标定在无真值参考的前提下,能够对模组多自由度的偏差进行校准,保证点云数量和精度符合感知的性能要求。
图源:鉴智机器人
鉴智机器人在AI算法、视觉传感器、异构计算等方向都拥有领先的技术积累和实践经验,已经在双目智驾系统方面建立起了软硬结合的技术壁垒。
双目智驾系统差异化优势详解
传统的双目立体匹配算法针对弱纹理、反光等区域效果比较差,对物体语义信息利用较少,算法适用范围具有局限性,效果上限明显。鉴智机器人通过贯穿传感器、AI算法的3D视觉理解路线,构建眼脑协同新范式,打造基于AI的双目立体视觉产品,提供高阶智驾前视感知所需的稠密、实时、同步的3D描述信息。
以基于AI的双目立体视觉传感器为核心,鉴智机器人双目智驾系统可以带来以下优势:
【性能优势】高性能上限:基于双目立体视觉的3D感知,实现真正的“事无巨细”3D感知服务于智能驾驶
目标感知优势:通过双目深度估计提供的3D信息降低了视觉感知后处理系统复杂度,得到更精确的3D视觉结果;
针对低纹理非标物体、非训练集目标、进出隧道场景和单目立体盲(车辆或地面印刷物易被检测为交通参与者或设施)等场景,通过双目深度估计能够获取精确的深度信息,可以更好地解决长尾问题。
道路结构感知优势:同样地,双目的深度信息可以更好地得到道路拓扑及可行驶区域,对于非结构化道路路面分隔、大曲率弯道、道路拓扑、坡道场景的识别更准确;同时,稠密的3D描述信息对于路面凹凸场景的高程检测相对比稀疏激光雷达点云检测性能更佳。
在线建图精度优势:双目深度估计可以增强在线局部建图中特征点的准确深度信息,提升在线建图的精度。同时,由于双目立体视觉可以对每一帧图片进行三角化,能够更快地进行地图的初始化和更新,从而具有更好的场景泛化性,可以实现效果更佳的记忆行车及记忆泊车功能。
图源:鉴智机器人
【成本优势】极致性价比:大幅降低整车智能化成本,助力车企客户实现竞争优势
传感器本身的低成本:以双目立体视觉产品为主的传感器配置本身成本低,还可以减少传感器数量,有效降低整车成本,相较于激光雷达等方案,呈现一个数量级的成本降低。
传感器复用的低成本:鉴智机器人双目立体视觉产品,除可满足高阶智驾功能外,更可赋能其他智能化应用,如魔毯高程检测、通过性检测等,实现单一传感器的多功能复用,降低整车综合成本。
【体系化优势】系统化效率提升:大幅提升系统能力边界和智驾安全性,打造面向现实世界3D感知的AI数据闭环
面向系统能力边界拓展和安全:鉴智机器人双目立体视觉智驾系统,从入门ADAS到更高阶智驾功能,均能提供“越级式”的系统能力,满足极致性价比的产品需求,实现“一个技术平台,覆盖不同定位车型平台”。同时,其自成一套的冗余感知能力和差异化的3D性能,能更好地从安全角度为自动驾驶场景扩展和等级的提升奠定扎实的基础。
面向3D感知的AI数据闭环:具备稠密的视觉3D描述信息,双目立体视觉成为天然的3D数据开垦机器,可面向大规模的量产交付实现极具规模化效应的视觉3D数据闭环。相较于传统围绕LiDAR建立的数据体系,鉴智机器人双目立体视觉产品助力实现端到端AI数据闭环,可数量级提升数据驱动的数据闭环迭代效率。
双目智驾系统能实现哪些功能?
鉴智机器人双目智驾系统为城市行车提供全天时、全天候、全类目的主动安全,功能包括主动安全系统、行车功能和双目智驾特色功能三大方面:
主动安全系统:满足Euro-NCAP 2023 要求实现五星标准的主动安全功能之外,同时支持增强型安全功能,包括ELKS(紧急车道保持)、AES (紧急自动转向),ESS (紧急安全停车策略),低速近距离AEB等,以提供全方位的主动安全保障能力;
行车功能:TSR/TLR(交通标识/灯识别及响应)、Pilot (居中巡航辅助驾驶)、NOA( 高速领航辅助驾驶)、DTLC(驾驶员拨杆变道)、ALC(自主变道)、Pilot Junction Assist(路口通行辅助)等。同时该系统支持行车场景体验的进一步拓展,包括后续实现城区领航辅助及低速行车辅助等。
双目智驾特色功能:近距离加塞处理、非标障碍物避让、大曲率弯道居中巡航、路面高程检测、道路拓扑结构构建、可行驶区域检测、高性能记忆行车和记忆泊车等。
这些特色功能均是基于双目3D感知的差异化优势开发而得。比如近距离防加塞功能,单目cut-in控制要检测到车辆目标时才会启动,这需要车身进入视野的部分能够支持车辆被识别到。而双目智驾系统直接利用双目3D信息,在车头刚刚探入时就能够检测到非标障碍物的探入,从而更加及时有效的启动cut-in控制。
再如非标障碍物绕行功能,一般而言,车祸、建筑工地等场景没有清晰的定义,是非标准化场景,单目智驾系统很难做出准确判断,而双目智驾系统可以检测出非常准确的可行驶区域实现绕行,大大提升这些非标场景的处理体验。
「双目智驾的特色场景功能示意」图源:鉴智机器人
随着用车场景的多样化,面向驾乘舒适性及底盘智能化的需求也在不断增加,双目智驾系统在魔毯悬架、驾驶模式智能调节、窄道可通过性检测等方面的表现同样优异。例如,通过双目预瞄可以精确感知左/右车轮区域的路面凹凸高度信息,配合悬架系统提前调节相关参数,提升驾乘舒适感;再如利用窄道可通过性检测,通过检测可行驶区域宽度,并结合自车宽度判断本车是否可通过,从而提高通过安全性。
「双目智驾面向驾乘舒适性及底盘智能化的应用」图源:鉴智机器人
鉴智机器人成立以来,已获取包括全栈自动驾驶方案和双目立体视觉产品在内的多个头部主机厂定点项目,目前已涵盖8个车型,其中多个车型已经完成交付,交付总量超25万台。鉴智机器人所推出的双目智驾系统,兼具差异化和性价比优势,为当前自动驾驶所面临的问题提供了更加本质和创新的解决思路。
4月18日-27日,鉴智机器人将携国内首个基于AI的双目立体视觉智能驾驶系统亮相第二十届上海国际汽车工业展览会,欢迎参观垂询!
上海车展,2.2H馆2BF020B展位,鉴智机器人等您赴约!
(以上内容来自鉴智机器人联合创始人兼CTO都大龙于2023年3月23-24日在2023光谷人工智能产业生态大会——智能网联汽车专场发表的《以视觉3D理解为核心的新一代自动驾驶系统》主题演讲。)
关键词:
相关阅读
推荐阅读
-
天天资讯:引领新趋势,鉴智机器人推出双目立体视
引领新趋势,鉴智机器人推出双目立体视觉智能驾驶系统2023年注定是充满变化与革新的一年。年初特斯拉大降价引发行业巨震,而后国内从新势力车更多
2023-03-28 17:29:41
-
环球看热讯:北汽制造元宝系列新增2023款心动版,
北汽制造元宝系列新增2023款心动版,仅售2 97万3月28日,北京汽车制造厂推出元宝家族新车型——2023款心动版车型,售价为2 97万元。图片来源:更多
2023-03-28 17:39:43
-
天天热点!2023年前面世 纯电动保时捷Cayenne新消息
2023年前面世纯电动保时捷Cayenne新消息近日,一则关于保时捷纯电动Cayenne的新消息曝光,新车或将于2030年之前面世。保时捷MacanEV将会在今年年更多
2023-03-28 17:25:54
-
世界球精选!全新路虎揽胜运动版SVR谍照 将年内
全新路虎揽胜运动版SVR谍照将年内发布日前,外媒拍摄到了一组全新路虎揽胜运动版SVR路试谍照图,新车正在进行冬季的最后测试阶段,预计将于年内更多
2023-03-28 17:45:58
-
【世界报资讯】LeddarTech推出最新传感器融合与感
LeddarTech推出最新传感器融合与感知产品可支持L2 L2+应用盖世汽车讯据外媒报道,全球领先的ADAS与自动驾驶软件技术提供商LeddarTech宣布推出更多
2023-03-28 16:45:41
-
前沿热点:简析中国车市,概览人机交互产业|盖世
简析中国车市,概览人机交互产业|盖世汽车随着智能化、电气化的持续发展,怎么更好的找到价值、更好的服务用户成为行业共同研讨的课题。2023年更多
2023-03-28 15:35:16
-
尼得科在中国开启齿轮机床和刀具的一站式供应
尼得科在中国开启齿轮机床和刀具的一站式供应日本电产集团旗下的尼得科机床株式会社将从4月开始销售由2022年3月成立的尼得科机床(浙江)有限更多
2023-03-28 15:27:58
-
今日播报!搭2.0L插混系统 全新雅阁插混版谍照曝光
搭2 0L插混系统全新雅阁插混版谍照曝光日前,车质网获取到一组全新一代雅阁插混版车型的测试谍照。新车依旧延续了燃油版车型的设计风格,在动更多
2023-03-28 15:34:05
时尚热图
热门标签
-
今日必看
-
精彩话题
-
资讯播报
- 世界球精选!全新路虎揽胜运动版SVR谍照 将年内发布
- 今日最新!解读山西省委一号文件:聚焦2023年全面推进乡村振兴重点工作
- 环球看热讯:北汽制造元宝系列新增2023款心动版,仅售2.97万
- 天天资讯:引领新趋势,鉴智机器人推出双目立体视觉智能驾驶系统
- 天天热点!2023年前面世 纯电动保时捷Cayenne新消息
- 天天速读:广西崇左江州区:党建引领 “江小爱”服务暖民心
- 【世界报资讯】LeddarTech推出最新传感器融合与感知产品 可支持L2/L2+应用
- 环球速看:ITU将2023年电信日主题定为“通过信息通信技术增强最不发达国家能力”
- 中国科学家发现月球水库 估计蓄水量多达2700亿吨
- 前沿热点:简析中国车市,概览人机交互产业|盖世汽车
- 今日播报!搭2.0L插混系统 全新雅阁插混版谍照曝光
- 环球速讯:家族特征显著 smart精灵#3设计图曝光
- 尼得科在中国开启齿轮机床和刀具的一站式供应
- 焦点快播:晋城铁塔大力推动5G基站布局专项规划落地实施
- 徐州移动AI摄像头助力药店智慧监管
- 毒性之强不亚于眼镜蛇!千万别碰!有人在游玩时发现,常出没于……
- 焦点热议:宁德时代与HGP建立合作伙伴关系,共同推动电池储能应用在美国落地
- 美国和日本就电动汽车电池矿物达成协议
- 焦点速读:云南移动元宇宙展厅精彩亮相
- 焦点热讯:锂矿商Liontown拒绝雅保37亿美元收购后股价大涨
- 观察:Li-Cycle将在法国建设电池处理工厂
- 环球今亮点!中兴通讯智慧中屏第一名中标云南移动,助力中移抢占家庭入口
- 长沙戏剧街在哪里?怎么去啊?
- 西班牙将于7月为电动汽车和电池提供欧盟资金
- 创始人卸任,Lyft任命新CEO
- 环球通讯!周生生黄金价格今天多少一克(2023年03月28日)
- 展现更多内饰细节 新现代Santa Fe谍照曝光
- 天天速递!欧盟和德国达成合成燃料协议,法拉利和保时捷将受益
- 今日热讯:特斯拉全新Model S和Model X在中国大陆开启交付
- 今日热门!吉安联通荣获“全国市场质量信用A等用户满意企业”称号
- 世界速递!古装怀孕肚子痛视频_古装怀孕肚子痛电视剧
- 环球最资讯丨特斯拉澳大利亚销量大涨
- 沃尔沃·健康天使跑团“天使之路”公益计划正式发布
- 当前热点-Nikola任命新首席财务官
- 【全球报资讯】中国地震局局长闵宜仁一行调研中国铁塔
- 今日热议:2023年一级建造师《项目管理》章节练习题精选0327_一级建造师
- 惠而浦洗衣机是杂牌还是品牌?惠而浦洗衣机显示过滤警示?
- 海信电视老是开关机怎么办?海信电视如何彻底关机?
- 如何关闭广电网络电视的收费功能?电视连接宽带还是需要付费?
- 制冷量3500w耗几度电?kfr-33gw表示的含义?
- 每日聚焦:大众集团控股股东家族从保时捷控股获得3.91亿欧元股息
- 漂洗加脱水能洗干净吗?洗衣机漂洗不动怎么回事?
- 全球速看:【国际快讯】Lucid召回637辆电动车;Lyft任命新CEO;Nikola首席财务官离职
- 全自动洗衣机侧门怎么用?松下滚筒洗衣机拆卸清洗方法?
- DeepWay完成7.7亿元A+轮融资,半年累计融资超12亿元
- 滚筒洗衣机夜间洗是什么意思?洗衣机上的夜间洗是什么意思?
- 洗鞋机可以当洗衣机用吗?鞋子丢进洗衣机会怎么样?
- 热门:Lucid因动力丧失风险召回数百辆汽车
- 松下333cn恢复出厂设置?松下aghpx393mc怎么设置更清晰?
- 天然气热水器最大多少升?天然气热水器用多少升?
- 热推荐:价格战殃及鱼池,二手车市场要崩?
- 马云谈 ChatGPT:用人工智能去解决问题,不是被人工智能所控制
- 洗衣机可以洗鞋子吗?洗衣机使用注意事项?
- 网面鞋能用洗衣粉洗吗?网面运动鞋泥渍怎么洗?
- 热水器变升什么意思?天然气热水器用多少升?
- 环球播报:工信部:13个省(区、市)的15个主体入选第二批5G应用安全创新推广中心
- 全自动洗衣机混合洗是什么意思?洗衣机混合洗正确方法是什么?
- 【全球热闻】试驾熊猫mini|萌动巴蜀,走进A00级微型电车的春天
- 格力空调开久了变成h1是什么意思?格力空调显示h1如何解决?
- 电视动态模式什么意思?电视屏幕亮度选节能还是动态变频?
- 特斯拉和“博南拉杆”有什么关系?
- 热水器自动休眠啥意思?海尔热水器智能模式是什么意思?
- 燃气热水器低温什么意思?燃气热水器多高水温合适?
- 怎样分辨空调是三相电还是两相电?空调是三相还是两相电?
- 世界观察:吉利凭什么不打价格战
- 戏剧性的一幕:恒大汽车面临停产,FF91即将量产!
- 全自动洗衣机脱水是怎么个意思?全自动洗衣机能单脱水吗?
- 世界速看:顶不住了?经销商呼吁国六B延后执行
- 辽宁省桓仁满族自治县发布大雾黄色预警
- 世界快看点丨苹果iOS16.4正式版为iPhone新增支持中国广电5G网络
- 每日报道:二手车市场加速升温,汽车金融“加码”促消费
- 兴业银行掌柜钱包官方网站掌柜钱包官网地址
- 当前热文:一个家庭,想要过得好,必须要具备“三张底牌”
- 向量a乘向量b等于向量c乘向量d-向量a乘向量b等于公式
- 环球新资讯:综合续航超过1000km 启辰发布DD-i超混动技术
- 当前关注:三月即将结束“降价派”VS“保价派”现状如何?
- 信息:专访中国移动王晓云:平台化服务网络是6G网络架构发展方向
- 全球今日讯!ST摩登:控股股东拟被动减持公司股份不超713万股
- 有望年内发布 全新大众Tiguan路试谍照曝光
- AutoX获颁上海首批无驾驶人测试通知书
- 世界快消息!向高端进发?长安深蓝更名为深蓝汽车
- 环球微头条丨厦门翔安区:硬核保障重大赛事 展现新城文明风采
- 哈弗品牌“龙序列”新品命名枭龙MAX、枭龙,首搭长城Hi4
- 每日报道:拉挤-缠绕成型
- 环球快消息!月底正式亮相 全新现代索纳塔官图发布
- 当前要闻:法雷奥凭借新一代雨刮片EverguardTM荣获创新奖
- 当前快报:福建泉州电信通过VoNR语音感知EMI创新评估体系开辟出VoNR语音感知优化新航道
- 全球速读:初创公司Pontosense研发毫米波雷达系统 可监测车内人员生命体征
- 环球播报:麦克奥迪:公司目前业务涉及到AI医疗方向主要为AI病理辅助诊断
- 特斯拉发布新功能 可以避免车辆预热前排出冷空气
- 天天微速讯:研究人员开发彩色薄膜 可帮助汽车保持凉爽
- 环球微资讯!国家统计局:汽车制造业营收利润双下降
- 实时焦点:Northvolt寻求融资逾50亿美元,欲成欧洲最大电池制造商
- 中国电信智能公司PaaS研发类服务项目集采:亚信、思芮等4家入围
- 天天简讯:国外服务器的几大优势
- 一体化压铸,是汽车行业的“工业革命”吗?
- 环球今热点:LG新能源将投56亿美元在美国建厂,正洽谈为丰田供应电池
- 供应中欧市场 蔚来ET5猎装版谍照曝光
- 最新:运动氛围出色 哈弗枭龙内饰谍照曝光
- 新资讯:青岛职业技术学院单招录取几率多少(青岛职业技术学院单招考什么)