特斯拉为什么「抛弃」毫米波雷达_TOP:PILOT

5月25日,特斯拉官方博客宣布,Autopilot正在过渡到基于摄像头的TeslaVision系统。

从2021年5月起,北美制造的Model3和ModelY将不再配备毫米波雷达,这些车型将通过特斯拉的摄像头视觉和深度神经网络来支撑Autopilot、FSD完全自动驾驶和某些主动安全功能。

单价约300人民币的前向雷达,超45万辆/年的销量规模,对于特斯拉的毫米波雷达供应商、顶级Tier1供应商大陆集团而言,中途丢掉一年过亿的订单实在不是个令人愉悦的消息。

去掉毫米波雷达

尽管特斯拉明确说明,计算机视觉和深度神经网络处理将实现主动安全/Autopilot/FSD的感知需求,但博客一出,各方立刻应声而动。

美国高速公路安全管理局官网修改了2021款Model3和ModelY的主动安全功能页面,包括前向防撞预警、防撞自动刹车、动态制动辅助均被明确提示,2021年4月27日后生产的车型不再配备。

深圳:推动数字人民币国际合作和跨境使用:金色财经报道,深圳市近日发布《深圳市优化国际化营商环境工作方案》,其中提出,增强金融市场国际化功能。携手香港推进前海深港国际金融城建设,建立健全对接港澳的开放型新体制和跨境合作制度体系,逐步形成多层次、多功能的金融市场和完备的金融服务产业链条。吸引集聚高能级金融总部和持牌机构。推进资本项目跨境人民币收入境内使用便利化,开展数字货币研究与移动支付等创新应用,推动数字人民币国际合作和跨境使用。[2023/8/7 21:28:43]

与此同时,《消费者报告》宣布暂停将2021款Model3列为「推荐」,美国高速公路安全保险协会取消了Model3曾经TopSafetyPick+的最高安全评级。

简单总结,特斯拉说我们移除了毫米波雷达,并通过摄像头实现了雷达之前的能力,但所有人都只听到了前半句。

在我看来,各大民间和监管的安全机构如今对特斯拉都有些过敏,事实上,如果我们去梳理全球第一大视觉感知供应商Mobileye这些年的耕耘,正是一个将雷达逐步移出汽车主动安全范畴的发展史。

动态 | 深圳基于区块链的网贷良性退出系统已在27家网贷机构投入应用:记者18日从深圳市地方金融监督管理局获悉,今年上半年深圳率先推出以区块链技术为核心的“网贷机构良性退出统一投票表决系统”,至今已在全市27家网贷机构投入应用,服务出借人39万余人,覆盖待收本金214亿余元。(羊城派)[2019/12/19]

2007年,Mobileye主动安全技术首次进入汽车行业。2010年,融合雷达和摄像头的MobileyeAEB搭载在沃尔沃品牌量产。2011年,Mobileye纯视觉前向防撞预警在宝马、通用和欧宝品牌量产。2013年,Mobileye纯视觉车辆和行人自动紧急制动在宝马和日产品牌量产。2013年,Mobileye纯视觉自适应巡航控制在宝马品牌量产。2015年,Mobileye纯视觉全功能AEB进入多个OEM。

但事情正在愈演愈烈。特斯拉CEOElonMusk不得不通过Electrek辟谣:所有的主动安全功能都在新下线的车型中有效,NHTSA会在下周对新车型进行重新测试,当前移除雷达的车型是标配这些功能的。

但公众的质疑并没有被打消。比如,雷达擅长的对障碍物距离和速度的测量,恰恰是摄像头的传统弱势项目,特斯拉如何解决?

声音 | 深圳市龙华区区长:将加快制定出台专项扶持政策,推动区块链等产业发展:金色财经报道,深圳市龙华区委副书记、区长王卫表示在接受采访时表示,我们将加快制定出台“1+N”专项扶持政策,通过推出产业技术创新、产业转型升级、企业梯队培育、空间布局优化、营商环境营造等方面的系列措施,推动新一代信息技术、人工智能、工业互联网、区块链、生命健康等重点产业向技术高端化、企业品牌化、应用泛在化、产业集群化迈进,努力打造深圳高质量发展主力区。[2019/11/12]

又或者,两种传感器怎么也比一种传感器好吧,即使摄像头可以做雷达所做的工作,两种传感器一起检测不好吗?

下面我们就来聊聊这些问题。

计算机视觉+RNN>雷达?

我们需要先了解雷达的技术原理,以及其在自动驾驶中所扮演的角色。

毫米波雷达,通过发射电磁波信号,接收目标反射信号来获得车身周围其他障碍物的相对速度、相对距离、角度、运动方向等。

通过对上述这些信息的处理,汽车得以配备一系列的主动安全功能,如自适应巡航控制、前向防撞预警、辅助变道、自动跟车甚至盲区检测等。

那么,特斯拉又如何通过摄像头获得上述信息的呢,比如,对前车距离的判断?

动态 | 深圳莲花山开出全国首张电费区块链发票:据深圳晚报报道, 1月31日,在深圳莲花山“变+充电站”,一电动车司机在南方电网深圳供电局全资子公司——深圳南方和顺电动汽车产业服务有限公司(下称“南方和顺”)工作人员的指导下仅用短短1分钟便开出全国首份充电电费区块链电子发票。[2019/2/1]

2020年8月21日,Elon在Twitter上表示,通过纯视觉进行准确的距离计算是基础,其他传感器可以提供帮助,但那不是基础。他所回复的博文,介绍的正是特斯拉一项名为《EstimatingobjectPropertiesUsingImageData》的专利。

4月13日,特斯拉Model3车主、Facebook分布式AI和机器学习软件工程师TristanRice「黑」进了Autopilot的固件,揭开了特斯拉通过机器学习取代雷达的技术细节。

根据Tristan的说法,从新固件的二进制文件中可以看出,Autopilot的深度神经网络增加了许多新的输出,除了现有的xyz输出外,还包括许多传统雷达输出的数据,例如距离、速度和加速度等等。

深圳文博会首现“数字报刊亭”,区块链为核心技术之一:5月11日,数字出版企业龙源数字传媒集团携“数字报刊亭”,亮相中国国际文化产业博览交易会。据介绍,“数字报刊亭”是“数字文化城市解决方案”三终端四平台的一部分,该方案采用人工智能、大数据、区块链、虚拟现实、AR场景等五大核心技术,实现文化生活服务的生产、传播、消费、管理全程数字化。[2018/5/12]

深度神经网络可以从一张静态的图片中读取速度和加速度吗?当然不行。

特斯拉训练了一个高度精确的RNN,通过15帧照片/秒的、基于时间序列的视频来预测障碍物的速度和加速度。

RNN又是什么?RNN的关键词是预测。RecurrentNeuralNetwork,循环神经网络,顾名思义,基于环状神经网络传递和处理信息,通过「内部记忆」来处理任意时序的输入序列,以准确预测接下来即将发生的事情。

英伟达的AI博客曾举过一个经典的例子:假设餐厅供应是菜品规律是不变的,周一汉堡、周二炸玉米饼、周三披萨、周四寿司、周五意面。

对于RNN而言,输入寿司并寻求「周五吃什么」的答案,Ta将会输出预测结果:意面。因为RNN已经知道这是一个顺序,而周四的菜品刚刚完成,因此接下来是周五的菜品是——意面。

对于Autopilot的RNN来说,给到当前汽车周围的行人、车辆和其他障碍物的移动路径,RNN就可以预测接下来的移动轨迹,包括位置、速度和加速度。

事实上,在5月25日正式官宣移除雷达的前几个月,特斯拉一直在将其RNN与全球车队中的雷达并行运行,通过雷达输出的正确数据和RNN输出结果校对,来提升RNN预测的准确性。

多说一句,对于中国交通工况下非常经典的加塞儿处理,特斯拉也通过类似的路线更替实现了更好的表现。

特斯拉AI高级总监AndrejKarpathy在CVPR2021的一次线上演讲中透露,对于前车加塞儿识别,特斯拉已经通过深度神经网络完成对传统规则算法的替换。

具体来说,Autopilot此前检测加塞儿基于一个写死的规则:首先要识别车道线,同时识别和跟踪前方的车辆,直到检测到前车速度出现符合加塞儿的阈值水平速度,才执行加塞儿指令。

而如今Autopilot的加塞儿识别移除了这些规则,完全通过RNN基于标注的海量数据做前车的行为预测,如果RNN预测前车将加塞儿,就执行加塞儿指令。

这就是过去几个月来特斯拉对加塞儿识别取得大幅改进的技术原理。

前文提到的特斯拉专利里详细解释了特斯拉训练RNN的运作形式。

特斯拉会将雷达和激光雷达输出的正确数据与RNN识别的对象相关联,以准确估计对象属性,例如对象距离。

在这个过程中,特斯拉开发了工具使得辅助数据与视觉数据的采集和关联实现了自动化,无需人工标注。此外,关联后可以自动生成训练数据用以训练RNN,从而实现高度精确地预测对象属性。

由于特斯拉在全球的车队规模已经超过100万辆,特斯拉得以在海量场景数据的训练下迅速改善其RNN的性能。

而RNN一旦将预测的准确性提升到和雷达输出结果的同等水平,就会形成相对毫米波雷达的巨大优势。

这是因为特斯拉Autopilot只搭载了前向雷达,在城市工况下车辆各个方位乱窜的行人、骑自行车和摩托车的人很难全部准确预测。即使是正前方的、在其45°探测范围内的障碍物,只要两个障碍物同距离、同速度,Autopilot此前搭载的雷达就无法分辨。

而Autopilot搭载的8颗摄像头实现了车身周围的360度覆盖,其编织的全车BEV鸟瞰神经网络可以无缝地预测全车任何一个方位的多个障碍物接下来的移动轨迹。

那特斯拉为什么不保留雷达,利用雷达和摄像头两种传感器进行双重校验呢?

ElonMusk详细解释过他对雷达和摄像头的看法:

在雷达波长下,现实世界看起来像一个奇怪的幽灵世界。除了金属,几乎所有东西都是半透明的。当雷达和视觉感知不一致时,你采信哪一个?视觉具有更高的精度,因此投入两倍的精力改善视觉比押注两种传感器的融合更明智。传感器的本质是比特流。摄像头比特/秒的信息量要比雷达和激光雷达高几个数量级。雷达必须有意义地增加比特流的信号/噪声,以使其值得集成。随着视觉处理能力的提高,摄像头的性能将会远远甩开当下的雷达。

这番表态看起来十分微妙。我们此前的文章《特斯拉:我为激光雷达代言》一文中曾经写到过ElonMusk对毫米波雷达的态度。在上面这番言论中,他同样没有「宣判」雷达在特斯拉的死刑。

「雷达必须有意义地增加比特流的信号/噪声,以使其值得集成。」即将到来的特斯拉Autopilot会搭载成像雷达吗?

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

金宝趣谈

[0:31ms0-4:664ms