特斯拉为什么「抛弃」毫米波雷达

5月25日,特斯拉官方博客宣布,Autopilot正在过渡到基于摄像头的TeslaVision系统。

从2021年5月起,北美制造的Model3和ModelY将不再配备毫米波雷达,这些车型将通过特斯拉的摄像头视觉和深度神经网络来支撑Autopilot、FSD完全自动驾驶和某些主动安全功能。

单价约300人民币的前向雷达,超45万辆/年的销量规模,对于特斯拉的毫米波雷达供应商、顶级Tier1供应商大陆集团而言,中途丢掉一年过亿的订单实在不是个令人愉悦的消息。

去掉毫米波雷达

尽管特斯拉明确说明,计算机视觉和深度神经网络处理将实现主动安全/Autopilot/FSD的感知需求,但博客一出,各方立刻应声而动。

美国高速公路安全管理局官网修改了2021款Model3和ModelY的主动安全功能页面,包括前向防撞预警、防撞自动刹车、动态制动辅助均被明确提示,2021年4月27日后生产的车型不再配备。

特斯拉帮助BTCPay Server修复漏洞:特斯拉员工披露了开源比特币支付处理器和钱包BTCPay Server中的一个错误,并帮助该项目团队修复了该错误。在上周审查了该项目的GitHub后,特斯拉将该漏洞告知了BTCPay团队,有关该错误的更多信息将在BTCPay的下一个主要版本中公开。(Coindesk)[2021/3/31 19:31:47]

与此同时,《消费者报告》宣布暂停将2021款Model3列为「推荐」,美国高速公路安全保险协会取消了Model3曾经TopSafetyPick+的最高安全评级。

简单总结,特斯拉说我们移除了毫米波雷达,并通过摄像头实现了雷达之前的能力,但所有人都只听到了前半句。

在我看来,各大民间和监管的安全机构如今对特斯拉都有些过敏,事实上,如果我们去梳理全球第一大视觉感知供应商Mobileye这些年的耕耘,正是一个将雷达逐步移出汽车主动安全范畴的发展史。

2007年,Mobileye主动安全技术首次进入汽车行业。2010年,融合雷达和摄像头的MobileyeAEB搭载在沃尔沃品牌量产。2011年,Mobileye纯视觉前向防撞预警在宝马、通用和欧宝品牌量产。2013年,Mobileye纯视觉车辆和行人自动紧急制动在宝马和日产品牌量产。2013年,Mobileye纯视觉自适应巡航控制在宝马品牌量产。2015年,Mobileye纯视觉全功能AEB进入多个OEM。

伯克希尔·哈撒韦副董事长:不会跟随特斯拉而进入比特币领域:伯克希尔·哈撒韦公司副董事长查理·芒格表示,其认为比特币最终不会成为世界交易媒介,它的波动性太大。并称:“我们不会跟随特斯拉而进入比特币领域。”此外,查理·芒格建议投资者不要买比特币或黄金。(金十)[2021/2/25 17:50:06]

但事情正在愈演愈烈。特斯拉CEOElonMusk不得不通过Electrek辟谣:所有的主动安全功能都在新下线的车型中有效,NHTSA会在下周对新车型进行重新测试,当前移除雷达的车型是标配这些功能的。

但公众的质疑并没有被打消。比如,雷达擅长的对障碍物距离和速度的测量,恰恰是摄像头的传统弱势项目,特斯拉如何解决?

又或者,两种传感器怎么也比一种传感器好吧,即使摄像头可以做雷达所做的工作,两种传感器一起检测不好吗?

下面我们就来聊聊这些问题。

计算机视觉+RNN>雷达?

我们需要先了解雷达的技术原理,以及其在自动驾驶中所扮演的角色。

毫米波雷达,通过发射电磁波信号,接收目标反射信号来获得车身周围其他障碍物的相对速度、相对距离、角度、运动方向等。

投行Wedbush:特斯拉投资比特币已赚约10亿美元:据投行Wedbush Securities估计,特斯拉在过去一个月中已大赚约10亿美元。2月8日特斯拉提交给美国证券交易委员会(SEC)的文件显示,特斯拉已经购买了价值15亿美元比特币,并将在不久的将来接受比特币付款。仅在这一消息公布后不到半月,比特币就已大涨近50%。

值得注意的是,特斯拉副业赚的钱甚至有可能超过主业。Wedbush分析师丹·艾夫斯(Dan Ives)认为,特斯拉投资比特币获得的收益可能比2020年卖电动车赚得还多。[2021/2/21 17:36:20]

通过对上述这些信息的处理,汽车得以配备一系列的主动安全功能,如自适应巡航控制、前向防撞预警、辅助变道、自动跟车甚至盲区检测等。

那么,特斯拉又如何通过摄像头获得上述信息的呢,比如,对前车距离的判断?

2020年8月21日,Elon在Twitter上表示,通过纯视觉进行准确的距离计算是基础,其他传感器可以提供帮助,但那不是基础。他所回复的博文,介绍的正是特斯拉一项名为《EstimatingobjectPropertiesUsingImageData》的专利。

特斯拉董事会成员Antonio Gracias是两家加密公司的董事:特斯拉董事会成员Antonio Gracias同时也是数字资产托管公司BitGo和加密货币交易平台ErisX的董事。不过暂不知道Antonio Gracias是否参与特斯拉的15亿美元比特币投资决策。Antonio Gracias是投资公司Valor Equity Partners的创始人。早些时候,Gracias投资了证券型通证平台Harbor,该平台去年被BitGo收购。(Decrypt)[2021/2/16 19:50:31]

4月13日,特斯拉Model3车主、Facebook分布式AI和机器学习软件工程师TristanRice「黑」进了Autopilot的固件,揭开了特斯拉通过机器学习取代雷达的技术细节。

根据Tristan的说法,从新固件的二进制文件中可以看出,Autopilot的深度神经网络增加了许多新的输出,除了现有的xyz输出外,还包括许多传统雷达输出的数据,例如距离、速度和加速度等等。

观点:特斯拉买BTC将促使更多公司加入比特币投资行列:2月10日消息,Ark Invest认为,特斯拉购买数十亿比特币是数字资产的转折点,因为它与机构采用直接相关。投资管理公司ARK Invest分析师Yassine Elmandjra表示,特斯拉购买比特币是一个催化剂,将促使更多公司购买比特币,并其推动价格上涨。(CNBC)[2021/2/10 19:27:31]

深度神经网络可以从一张静态的图片中读取速度和加速度吗?当然不行。

特斯拉训练了一个高度精确的RNN,通过15帧照片/秒的、基于时间序列的视频来预测障碍物的速度和加速度。

RNN又是什么?RNN的关键词是预测。RecurrentNeuralNetwork,循环神经网络,顾名思义,基于环状神经网络传递和处理信息,通过「内部记忆」来处理任意时序的输入序列,以准确预测接下来即将发生的事情。

英伟达的AI博客曾举过一个经典的例子:假设餐厅供应是菜品规律是不变的,周一汉堡、周二炸玉米饼、周三披萨、周四寿司、周五意面。

对于RNN而言,输入寿司并寻求「周五吃什么」的答案,Ta将会输出预测结果:意面。因为RNN已经知道这是一个顺序,而周四的菜品刚刚完成,因此接下来是周五的菜品是——意面。

对于Autopilot的RNN来说,给到当前汽车周围的行人、车辆和其他障碍物的移动路径,RNN就可以预测接下来的移动轨迹,包括位置、速度和加速度。

事实上,在5月25日正式官宣移除雷达的前几个月,特斯拉一直在将其RNN与全球车队中的雷达并行运行,通过雷达输出的正确数据和RNN输出结果校对,来提升RNN预测的准确性。

多说一句,对于中国交通工况下非常经典的加塞儿处理,特斯拉也通过类似的路线更替实现了更好的表现。

特斯拉AI高级总监AndrejKarpathy在CVPR2021的一次线上演讲中透露,对于前车加塞儿识别,特斯拉已经通过深度神经网络完成对传统规则算法的替换。

具体来说,Autopilot此前检测加塞儿基于一个写死的规则:首先要识别车道线,同时识别和跟踪前方的车辆,直到检测到前车速度出现符合加塞儿的阈值水平速度,才执行加塞儿指令。

而如今Autopilot的加塞儿识别移除了这些规则,完全通过RNN基于标注的海量数据做前车的行为预测,如果RNN预测前车将加塞儿,就执行加塞儿指令。

这就是过去几个月来特斯拉对加塞儿识别取得大幅改进的技术原理。

前文提到的特斯拉专利里详细解释了特斯拉训练RNN的运作形式。

特斯拉会将雷达和激光雷达输出的正确数据与RNN识别的对象相关联,以准确估计对象属性,例如对象距离。

在这个过程中,特斯拉开发了工具使得辅助数据与视觉数据的采集和关联实现了自动化,无需人工标注。此外,关联后可以自动生成训练数据用以训练RNN,从而实现高度精确地预测对象属性。

由于特斯拉在全球的车队规模已经超过100万辆,特斯拉得以在海量场景数据的训练下迅速改善其RNN的性能。

而RNN一旦将预测的准确性提升到和雷达输出结果的同等水平,就会形成相对毫米波雷达的巨大优势。

这是因为特斯拉Autopilot只搭载了前向雷达,在城市工况下车辆各个方位乱窜的行人、骑自行车和摩托车的人很难全部准确预测。即使是正前方的、在其45°探测范围内的障碍物,只要两个障碍物同距离、同速度,Autopilot此前搭载的雷达就无法分辨。

而Autopilot搭载的8颗摄像头实现了车身周围的360度覆盖,其编织的全车BEV鸟瞰神经网络可以无缝地预测全车任何一个方位的多个障碍物接下来的移动轨迹。

那特斯拉为什么不保留雷达,利用雷达和摄像头两种传感器进行双重校验呢?

ElonMusk详细解释过他对雷达和摄像头的看法:

在雷达波长下,现实世界看起来像一个奇怪的幽灵世界。除了金属,几乎所有东西都是半透明的。当雷达和视觉感知不一致时,你采信哪一个?视觉具有更高的精度,因此投入两倍的精力改善视觉比押注两种传感器的融合更明智。传感器的本质是比特流。摄像头比特/秒的信息量要比雷达和激光雷达高几个数量级。雷达必须有意义地增加比特流的信号/噪声,以使其值得集成。随着视觉处理能力的提高,摄像头的性能将会远远甩开当下的雷达。

这番表态看起来十分微妙。我们此前的文章《特斯拉:我为激光雷达代言》一文中曾经写到过ElonMusk对毫米波雷达的态度。在上面这番言论中,他同样没有「宣判」雷达在特斯拉的死刑。

「雷达必须有意义地增加比特流的信号/噪声,以使其值得集成。」即将到来的特斯拉Autopilot会搭载成像雷达吗?

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

银河链

MATIC“数字人民币”安全性有保证,带来支付新时尚

近日,北京、上海、长沙等地陆续展开新一轮数字人民币试点活动。那么,数字人民币会给我们的生活带来哪些改变?方便还是不方便?何时会全面推广?数字货币是顺应数字经济、数字金融的发展潮流而必须采取的一个.

币安交易所app下载二氧化碳转化利用是否需要换换思路?

“未来国家间的博弈聚焦在碳博弈”“谁能主动应对‘捕碳’难题,谁就拿到了通往未来的钥匙”“如何把二氧化碳‘变废为宝’是实现‘双碳’的关键”……这是记者近日采访听到的业内人士对我国实现碳达峰、碳中和.

[0:0ms0-1:346ms