您的位置:首页 > 互联网

从小鹏 P7 事故分析,看智能驾驶瓶颈在哪?_小鹏p7车辆定位

发布时间:2022-08-16 06:16:34  来源:互联网     背景:

8 月 10 日,宁波高架发生一起小鹏 P7 追尾致人死亡的事故。   发生事故的原因主要有两点,一是被撞车辆是静止的。二是被撞人员站在车后。离车很近的地方是水泥护栏,还有一个人蹲着,离被撞车很近。

京东零售集团经营理念

小鹏p7驾驶员疲劳监控

苹果依赖中国市场

  即便这次事故,车主没有开启 NGP 功能,AEB 系统也应该起作用,但上述的原因让 AEB 系统失效了。   有人可能会说时速 80 公里超出了 AEB 的上限,早期的 AEB 系统的确如此,上限一般是时速 60 公里。   2020 年后的新一代 AEB 则不然,在速度上限内是刹停,也就是刹车力度会达到最大,超过上限则是减速。   以特斯拉为例,如减速 50 公里,那么系统则在时速 110 公里情况下触发 AEB,最多减速至时速 60 公里。   有些如奔驰,AEB 速度上限高达时速 110 公里。   还有些车型把这一部分单独抽出,称之为碰撞缓解,实际就是加强版的 AEB。   只减速不刹停,这样做也是为了避免高速情况下后车的追尾。

小鹏p7自动驾驶事故

  蔚来和特斯拉都发生过撞静止车辆的事故,特斯拉的次数尤其多,多次撞向白色卡车和消防车。   在封闭场地测试时,我们可以看到静止车辆或行人都能触发 AEB,即使最廉价的车型都能做到刹停。   但为何在真实道路上,遇到静止目标时,AEB 不行了?   01   分离动态目标的常见三种方法

小鹏p7驾驶员疲劳监控图像识别流程

     我们先从先从图像识别流程和运用目标分离方法来看看自动驾驶系统是如何识别和处理障碍物的。   上图为机器视觉的处理流程,其主要过程为输入图像,对输入的图像进行预处理。   预处理之后的图像,再对其进行 ROI 区域检测或者异常检测,对已经检测出来的区域进行特征提取分类识别等。   系统对运动目标是需要特别重视的,会优先处理运动目标,因此第一步要将运动目标从背景图中分割出来,有些系统为了避免误动作,干脆将静态目标过滤掉。

小鹏p7车辆定位运动目标分离方法

中兴天机axonm双屏手机

     分离动态目标最常见的三种方法是帧差法、光流法和背景差法。   考虑到实时性和成本,目前业内大多采用帧差法。这种方法对运算资源消耗最少,最容易达到实时性,但缺点准确度不高。   所谓帧差法,即检测相邻帧之间的像素变化。   帧差法的基本思想是:运动目标视频中,可以根据时间提取出系列连续的序列图像,在这些相邻的序列图像中,背景的像素变化较小,而运动目标的像素变化较大,利用目标运动导致的像素变化差,则可以分割出运动目标。   帧差法可以分为两帧差分法与三帧差分法。

小鹏p7自动驾驶安全吗

  两帧差分法

2013chinajoy完美展台

长安汽车北斗天枢计划

苹果ipad每一代

小鹏p7自动驾驶安全吗

  三帧差分法   两帧差分法就是将视频采集到时序列图像的相邻两帧图像进行差分。   对相邻的两帧图像进行差分,可以在任何具有复杂的图像特征 (例如,纹理特征、灰度均值等) 上进行。   因此,只要明显区别与背景的运动物体均可检测出来。   根据给定的阈值,对差分结果二值化:   若差值图像大于给定阈值,则认为该像素点是前景目标中的点,并将该像素点作为运动目标的一部分;   若差值图像小于给定阈值,则认为该像素点属于背景目标点,从而将运动目标从背景目标中分割出来。   图像进行阈值分割之后,通常都带有噪声,因此需要使用形态学滤波的方法对噪声进行衰减。衰减噪声后得到的图像运动目标会存在一些空洞,需要进行连通性处理,最后才得到判别目标。   阈值设定太低,检测不到目标。设定太高,会被检测为两个分开的物体。   同时对于比较大、颜色一致的运动目标,如白色大货车,帧间差分法会在目标内部产生空洞,无法完整分割提取运动目标。   分离出动态目标,对目标进行识别并探测其距离,如果动态目标都已经处理完毕,这才开始处理静态目标。而在封闭场地测试场里,只有一个目标,很轻松就能分离出背景,只处理静态目标。   而在真实道路上,静止目标比移动目标的检测要晚大约 2 到 4 秒,这次发生事故时,小鹏 P7 的时速是 80 公里,也就是 44 到 88 米。   光流法是利用图像序列中像素在时间域上的变化以及相邻帧之间的相关性,来找到上一帧跟当前帧之间存在的对应关系,从而计算出相邻帧之间物体的运动信息。   研究光流场的目的就是为了从图片序列中近似得到不能直接得到的运动场,其本质是一个二维向量场,每个向量表示场景中该点从前一帧到后一帧的位移。对光流的求解,即输入两张连续图象(图象像素),输出二维向量场。   除了智能驾驶,体育比赛中各种球类的轨迹预测,军事行动中的目标轨迹预测都能用到。   光流场是运动场在二维图像平面上的投影。因为立体双目和激光雷达都是 3D 传感器,而单目或三目是 2D 传感器,所以单目或三目的光流非常难做。   光流再分为稀疏和稠密(Dense)两种,稀疏光流对部分特征点进行光流解算,稠密光流则针对的是所有点的偏移。   最常见的光流算法即 KLT 特征追踪,早期的光流算法都是稀疏光流,手工模型或者说传统算法。   2015 年有人提出深度学习光流法,在 CVPR2017 上发表改进版本 FlowNet2.0,成为当时最先进的方法。截止到现在,FlowNet 和 FlowNet2.0 依然是深度学习光流估计算法中引用率最高的论文。   传统算法计算资源消耗少,实时性好,效果比较均衡,但鲁棒性不好。   深度学习消耗大量的运算资源,鲁棒性好,但容易出现极端,即某个场景非常差,但无法解释,与训练数据集关联程度高。   即使强大的英伟达 Orin 芯片,在 FlowNet2.0 上也无法做到实时性,毕竟 Orin 不能只做光流这一件事。   光流法比帧差法准确度要高,但会大量消耗运算资源。   02   4D 毫米波雷达会漏检吗?

小鹏p7自动驾驶安全吗

无锁版iphone值得买吗

  四种毫米波雷达性能对比   目前典型的 76GHz 毫米波雷达的带宽是 500GHz   大部分毫米波雷达的带宽是 500MHz,也就是 0.5GHz,目标分离度是 150 厘米。   也就是说,1.5 米内的两个目标,毫米波雷达会识别成一个——这次小鹏 P7 发生的事故也是如此,车辆很靠近水泥护栏,很有可能会被认为是一个目标。   特斯拉最近也在研发毫米波雷达,其带宽应该是 500MHz,全球最先进的 4D 毫米波雷达即大陆汽车的 ARS540,也是 500MHz。   博世还未量产的 4D 毫米波雷达是 867MHz,比特斯拉和大陆都要好,缺点可能是功耗太高,射频输出功率达到惊人的 5495 毫瓦,整体功耗估计有 30-60 瓦。   ARS540 的射频输出功率是 1143 毫瓦,整体功耗大概 10 瓦。这对一个一直常开的传感器来说功耗似乎太高了。   再有就是虽然 60GHz 以上波段无需牌照,但超过 1GHz 的带宽,可能还是会有监管,在没有明确政策出台前,业界不敢研发这种高宽带雷达,万一禁止就白研发了。   因为目标分离度的问题,我估计厂家为了避免误动作,未必敢将 4D 毫米波雷达单独做为 AEB 的触发条件,肯定要以视觉为准。   除了静止目标原因外,这次小鹏 P7 在事故发生前,被撞者走到车尾。这就形成了一个很罕见的目标,既像车又像行人,在这种情况下,就会出现漏检。   03   基于单目、三目的机器视觉,有着天然缺陷

小鹏p7车辆定位

  基于单目或三目的机器视觉,有着天然的无法改变的缺陷,这个缺陷表现为识别或者说分类与探测是一体的,无法分割,特别是基于深度学习的机器视觉。   也就是说,如果系统无法将目标分类(也可以通俗地说是识别),也就无法探测。   换句话说,如果系统无法识别目标,就认为目标不存在。车辆会认为前方无障碍物,会不减速直接撞上去。   什么状况下无法识别?   有两种情况:   第一种是训练数据集无法完全覆盖真实世界的全部目标,能覆盖 10% 都已经称得上优秀了,更何况真实世界每时每刻都在产生着新的不规则目标。   深度学习这种穷举法有致命缺陷。特斯拉多次事故都是如此,比如在中国两次在高速公路上追尾扫地车(第一次致人死亡),在美国多次追尾消防车。   第二种是图像缺乏纹理特征,比如在摄像头前放一张白纸,自然识别不出来是什么物体。某些底盘高的大货车侧面,就如同白纸,基于深度学习的机器视觉此时就如同盲人,不减速直接撞上去。   在以深度学习为核心的机器视觉里,边界框(Bounding Box)是关键元素。   在检测任务中,我们需要同时预测物体的类别和位置,因此需要引入一些与位置相关的概念。通常使用边界框来表示物体的位置,边界框是正好能包含物体的矩形框。   对单目、三目来说,其机器视觉如下图:

小鹏p7无人驾驶

联想拯救者y9000x图片

  那么立体双目呢?

小鹏p7 安全性

  双目可以准确识别出中央隔离带,无论怎么用深度学习、单目、虚拟双目,单目和三目在这种大面积空洞无纹理特征的车侧和车顶图像前,就如同瞎子,什么也看不到。   事实上,特斯拉也有撞上中央隔离带致人死亡的事故。   立体双目的流程是这样的,如下图:

小鹏p7自动驾驶安全吗

  最后输出可行驶空间(free space),与单目、三目完全不同,它不需要识别,自然也不需要画出 Bounding Box。   双目也有缺点,运算量太高。当然,双目不需要 AI 运算。   尽管只有奔驰和丰田用英伟达处理器处理立体双目,新造车势力除了 RIVIAN,目前都不使用立体双目(小鹏、小米可能在将来使用立体双目),但英伟达每一次硬件升级都不忘对立体双目部分特别关照。

小鹏p7驾驶员疲劳监控

  英伟达立体双目处理流程,立体双目视差的获得需要多种运算资源的参加,包括了 VIC、GPU(CUDA)、CPU 和 PVA。

小鹏p7无人驾驶

  英伟达 Orin 平台立体双目视差测试成绩,要达到每秒 30 帧,那么处理时间必须低于 30 毫秒,考虑到还有后端决策与控制系统的延迟,处理时间必须低于 20 毫秒。   1 个下取样情况下,显然无法满足 30 帧的要求。   4 个下取样,不加置信度图时,单用 OFA 就可以满足。加置信图后,需要 OFA/PVA/VIC 联手,也能满足 30 帧需求。但这只是 200 万像素的情况下,300 万像素估计就无法满足了。   奔驰的立体双目是 170 万像素,输出视差图的边缘精度不会太高,有效距离也不会太远。如本文开头所说的状况,估计可以减速,但难以刹停,反应时间不够。   可以说,除了立体双目系统,遇到这次小鹏 P7 事故这样的怪异目标,都会漏检。   04   激光雷达能否避免这类事故的发生?   那么,装了激光雷达会不会避免这个事故?   恐怕也不能。   目前主流的激光雷达也是基于深度学习的,纯深度学习视觉遇到的问题,激光雷达也会遇到,无法识别就画不出 Bounding Box,就认为前面什么都没,不减速撞上去。   主流的激光雷达算法经历了三个阶段:

  • 第一阶段是 PointNet
  • 第二阶段是 Voxel
  • 第三阶段是 PointPillar

  PointPillar 少了 Z 轴切割,而是使用 2D 骨干,这导致其精度下降,性能相较于纯 2D 的视觉,提升并不明显。这也就是为什么特斯拉不使用激光雷达。   而不依赖深度学习、具备可解释性的多线激光雷达算法,目前还未见面世。博世、奔驰和丰田在研究,这会是一个漫长的过程。   深度学习太好用了,不到半年,一个普通大学生就可以熟练调参。   深度学习淘汰了几乎所有的传统算法。   眼下,几乎没有人研究激光雷达的传统算法,比如激光雷达的强度成像。   目前,智能驾驶最关键的问题是过于依赖不具备解释性的深度学习,或者说深度神经网络,也就是大家常说的 AI——这可能导致无人驾驶永远无法实现。


返回网站首页

本文评论
抖音本地生活启动“心动观赛季”营销活动「抖音专场活动」
10月9日 消息:昨日,抖音生活服务宣布,2022世界杯将至,平台将启动心动观赛季活动,联合全国万家优质商家,覆盖餐饮、酒旅、休娱等全品类生活服务领域,以多矩阵新颖的玩法,超优质资源...
日期:10-13
苹果多设备无线充电专利获批(无线充电 专利)
  近日,苹果公司“具有多个功率接收设备的无线充电系统”专利获得授权。   摘要显示,本发明题为“具有多个功率接收设备的无线充电系统”。本发明公开了一种无线充电系...
日期:06-11
红米note11pro天玑1200「红米Note 11R上架!天玑芯片配直屏」
中关村在线消息:9月29日,据相关爆料,红米即将明日正式发布红米Note11 R,发售时间为明日上午十点整,售价暂未公布,预计售价不会超过1999元,产品定位为高刷屏长续航,5G小金刚,新机主打...
日期:09-29
携号转网怎么办?攻略来了(携号转网如何转回来)
  11月11日,工信部印发《携号转网服务管理规定》的通知(以下简称《规定》),明确携号转网12月1日起正式施行。11月14日,三大运营商发布携号转网服务细则,并表示已从11月10日起...
日期:10-16
标准滞后 苏泊尔“质量门”波及全行业
  在人们关注苏泊尔不锈钢炊具不合格事件的同时,会发现爱仕达、庆展、康佑等国内行业最具影响力的品牌也赫然在列,难道是整个行业都不符合国家标准?对此,五金协会理事长张东...
日期:07-24
腾讯回应出售美团股权:不实!美团市值却跌掉千亿(美团腾讯入股)
《科创板日报》8月16日讯(记者 张洋洋) 今日午后,美团港股直线下挫,跌幅扩大至10%。此前有市场消息称,腾讯计划出售美团的全部或大部分股权,对此,腾讯方面回应《科创板日报》记者称...
日期:08-19
想在抖音原生化获取线索?这2个链路通吃
声明:本文来自于微信公众号见实(ID:jianshishijie),作者:阿爽,授权转载发布。近一年来,欧派家居新客转化用户高达90%,6个月粉丝增长12万+,派单率环比提升27%。转化效果让许多人眼前...
日期:12-26
中小企业天猫入驻「淘宝天猫发布5项支持中小企业发展举措」
12月14日 消息:今日,淘宝天猫发布5项支持措施,助力中小企业发展。针对销售受阻,聚划算将上线中小企业销售专场,淘宝直播将给予产业带直播小店和中小主播专属流量扶持。其中,对产...
日期:12-14
贾伟:在大火中涅槃,在苦难里“生花”
《潮头》是网易科技新推的关注新经济热门人物的栏目,“大浪翻滚,谁立潮头” , 《潮头》致力还原热门KOL和青年领袖的商业密码和人生理想。文|闫妍2018年7月8日,贾伟一手创办的洛...
日期:12-12
美团购药 疫情「 美团买药启动“重点疫情药品保供”专项扶持」
连日来,北京、上海、广州等全国多地市民对感冒、发热、咽痛、咳嗽类药品的购买需求持续爆发式增长,不少药店在保供给的过程中,遇到了进货难、进货慢、门店减员等诸多难题。京东...
日期:12-15
天猫国际“冲啊星主播”直播挑战赛开打!价值百万冠军奖励花落谁家?
  天猫国际超级直播掀起年中直播热浪!“8月23日,冲啊!星主播”直播挑战赛正式拉开帷幕,林依轮、李响、叶一茜等多位主播开播角逐价值超百万冠军奖励。本次活动是天猫国...
日期:02-20
加速布局信创产业,国双自主可控产品获麒麟系统全认证!
  近日,中国领先的企业级大数据和人工智能解决方案提供商,国双继与中国系统飞腾CPU、浪潮集团英信服务器、龙芯中科处理器等我国自主研发的主流IT环境完成产品兼容性认证...
日期:12-02
缘何苹果谷歌和Facebook数据中心钟情北卡_谷歌与Facebook
  【赛迪网讯】 6月5日消息,据国外媒体报道,近日苹果新的耗资10亿美元修建的超级数据中心亮相Google Earth,地理坐标显示位于北卡罗来纳州的梅登,占地50万平方英尺。   梅...
日期:07-28
特斯拉在美国打起“价格战” 放出7500美元折扣保销量「特斯拉美国卖多少」
12月23日消息,据国外媒体报道,为挽回流失的订单,周四特斯拉官网更新了新的北美折扣。airpods pro要出新一代了吗据特斯拉官网显示,针对Model 3和Model Y的车主,本月21日至31日期...
日期:12-23
天一冷就爆卖!河北厂二代卖神器,年销800万件
声明:本文来自于微信公众号 天下网商(ID:txws_txws),作者:丁洁,授权转载发布。据统计,人的一生,大概有三年时间会在厕所里度过,成年人每天上4-6次厕所,一年平均1800次。人类对厕所的...
日期:12-19
蒋方舟清华大学录取作文_蒋方舟母女共同走进清北网校大师课 直播分享写作技巧
  写作来源于生活,对于学生也一样,写作文的灵感来源于生活。6月17日晚,青年作家蒋方舟及其母亲尚爱兰在清北网校大师公开课上,围绕“如何找到生活当中的写作题材”以及“如何...
日期:07-14
论异见的表达:多少罪恶假自由之名
  7月3日,2019百度AI开发者大会在北京国家会议中心举行。本是开发者们的技术盛宴,然而却发生了一个令全场震惊的意外。在百度公司创始人、董事长兼CEO李彦宏演讲时,一位不明...
日期:09-18
家庭影院买什么品牌的好_家庭影院有哪些品牌?应该怎么选择,哪几点需要注意?
  由于春节前后的特殊情况,不少公共娱乐场所都禁止开放,封闭空间人头攒动的电影院更是一直到5月都未能开放。这可苦了不少爱看电影的小伙伴,也勾起了不少朋友搭建家庭影...
日期:12-21
俞永福大怒列举腾讯四大罪状:QQ要杀死UC
  汤浔芳 北京报道   “我不准备当哑巴了。”UC优视董事长兼CEO俞永福(微博)告诉记者,在多次沟通无果后,自己“忍无可忍”了。从10月26日起,俞永福在新浪上连发四篇博客,拷...
日期:07-24
苏宁小店便利店的优势_便利店研究报告出炉:苏宁小店构建“到家+到店”综合模式
  11月27日下午,在2019WISE新经济大会“全民消费”论坛上,36氪线下发布了《连锁零售便利店品牌市场性调整与新策略》(或便利店研究报告),分享新经济、新风口下的便利店市场...
日期:07-24