上周,Waymo的联合创始人兼CEO德米特里·多尔戈夫在一次公开分享中,再次清晰地阐述了其公司坚持的“多传感器融合”技术路线,并将矛头直指特斯拉长期推崇的“纯视觉”方案。这场隔空对话,远不止是两家明星公司之间的路线之争。它像一把钥匙,为我们打开了一扇理解当下自动驾驶技术核心分歧与未来走向的大门。对于身处技术浪潮中的开发者、工程师和产品决策者而言,这背后隐藏的,是关于如何定义“安全”、如何平衡“成本”与“冗余”,以及如何构建一个真正可信赖的感知系统的深层逻辑。
很多人会把这场争论简单地理解为“激光雷达派”与“摄像头派”的对抗,或者“堆料”与“算法”的较量。但如果你只看到这一层,可能就错过了最关键的认知。多尔戈夫的观点,其核心并非否定视觉的价值,而是从根本上质疑:在一个关乎公共安全的复杂系统中,能否将“看见”与“理解”世界的全部责任,都押注在单一、且物理特性存在固有局限的传感器上?这就像在问,我们能否仅凭一双眼睛,就在任何天气、任何光照、任何距离下,都做出百分之百准确的驾驶决策?答案显然是否定的。而Waymo的选择,本质上是将“感知”从一个“识别问题”升级为一个“物理世界建模问题”,其技术逻辑的起点,就与特斯拉的“端到端模仿学习”或“BEV+Transformer”范式截然不同。
1. 从“识别”到“建模”:多传感器融合的底层逻辑是什么?
要理解Waymo的路线,首先要跳出“哪个传感器更准”的对比思维。多传感器融合(Multi-Sensor Fusion)的核心目标,不是让激光雷达、摄像头、毫米波雷达各自为战,然后投票表决。它的精髓在于构建一个超越任何单一传感器物理极限的、统一且鲁棒的“世界模型”。
1.1 单一传感器的“阿喀琉斯之踵”
每种传感器都有其无法克服的物理短板,这是工程上的客观事实,也是多传感器融合存在的根本理由。
- 摄像头(视觉):它的优势是分辨率高、纹理信息丰富,能“看懂”红绿灯、交通标志、车道线等语义信息。但其致命弱点是被动感知。它依赖环境光,在逆光、夜间、隧道出入口、暴雨大雪等极端条件下,成像质量会急剧下降甚至失效。更重要的是,它无法直接、精确地测量距离(深度)。虽然可以通过多目视觉或运动恢复结构(SFM)估算,但其精度、稳定性和计算开销,在高速动态场景下远不如主动测距传感器。
- 激光雷达(LiDAR):它的核心价值是主动发射激光并直接获取高精度的三维点云。它不依赖光照,能精确测量目标物体的距离、尺寸和轮廓,在黑暗、逆光下表现稳定。但其短板在于,点云缺乏纹理和颜色信息,难以区分一个静止的卡车和一幅印着卡车图案的广告牌(这就是著名的“广告牌问题”)。此外,在雨、雪、雾等恶劣天气下,激光束会被散射,导致点云噪声增大、有效探测距离缩短。
- 毫米波雷达(Radar):它的优势是测速极其精准(利用多普勒效应),并且穿透力强,能穿透雨、雾、灰尘,在恶劣天气下仍能工作。同时,它的探测距离通常很远。但其分辨率低,难以识别物体的具体形状和类别,对静止物体也不敏感(传统雷达会过滤掉静止回波以防止误报)。
特斯拉的纯视觉路线,其全部赌注都压在“用超强的算法(如BEV鸟瞰图网络、Occupancy Network占用网络)来弥补摄像头物理缺陷”上。这就像试图用最顶尖的软件算法,去为一台分辨率固定的相机“超频”,让它能猜出原本拍不清楚的细节。而Waymo的逻辑是:既然物理定律无法突破,为何不直接引入能提供互补信息的“硬件伙伴”?
1.2 融合的本质:不是“投票”,而是“重建”
初级的多传感器融合可能是“后融合”(Late Fusion):摄像头识别出一个“车”,激光雷达也识别出一个“立方体”,然后根据空间位置关联,认为它们是同一个物体,赋予其“车”的标签和激光雷达的精确位置。
但Waymo等头部公司早已进入“前融合”(Early Fusion)或“特征级融合”的深水区。其流程更像这样:
- 时空对齐:将所有传感器(不同视角的摄像头、激光雷达、雷达)的数据,通过精确的外参标定和内参校准,统一到车辆坐标系下的同一时刻。这一步的精度是融合的基础,误差会导致“重影”和误判。
- 特征提取与深度融合:不再各自为政地做识别。例如,神经网络会同时接收来自摄像头区域的图像像素和来自激光雷达投射到该区域的点云特征,让算法在早期就学习“这个图像斑块对应的三维结构是怎样的”。这相当于让视觉有了“触觉”(深度),让激光雷达有了“视觉”(语义)。
- 构建4D动态场景图:输出不是一个简单的障碍物列表,而是一个包含道路结构、静态物体、动态物体(带轨迹预测)、交通参与者意图的、随时间演进的4D场景模型。雷达提供的精准径向速度,在这里被无缝融入动态物体的运动状态估计中。
这种融合带来的质变是什么?是“冗余”和“互补”共同作用下的系统级鲁棒性。当摄像头因强光致盲时,激光雷达和雷达依然能告诉你前方有物体及其位置速度;当激光雷达在暴雨中噪声激增时,摄像头和雷达可以交叉验证,并通过算法滤除噪声;当雷达误将天桥当成静止障碍物时,摄像头和激光雷达可以结合语义和三维形状将其识别为可通行区域。
2. 纯视觉路线的理想与现实:特斯拉在解决一个怎样的问题?
理解了多传感器融合的“重建”逻辑,我们就能更客观地审视特斯拉的纯视觉路线。埃隆·马斯克将激光雷达称为“拐杖”,其核心理念是:既然人类靠一双眼睛就能开车,那么理论上,足够聪明的AI也应该可以。这条路径的终极目标,是打造一个完全仿生的、低成本的、可规模化的视觉驾驶大脑。
2.1 纯视觉的技术支柱:数据、算力与算法闭环
特斯拉路线的可行性,建立在三个强大的基础之上:
- 海量真实世界数据:特斯拉拥有全球数百万辆量产车组成的庞大车队,每天收集海量的真实驾驶视频数据。这是任何一家采用昂贵多传感器套件的Robotaxi公司都无法比拟的数据优势。数据是训练视觉模型,尤其是解决长尾难题(Corner Cases)的燃料。
- “影子模式”与持续学习:车辆在人类驾驶时,其自动驾驶系统仍在后台默默运行(“影子模式”),不断将自己的决策与人类驾驶员的实际操作进行对比。当系统判断错误或与人类行为不一致时,相关数据片段会被自动上传,用于模型的迭代优化。这形成了一个强大的数据闭环。
- 算法架构的演进:从早期的2D检测,到引入鸟瞰图(BEV)感知让网络具备空间理解能力,再到最新的Occupancy Network(占用网络)直接预测每个3D体素是否被占据,特斯拉的视觉算法正在试图绕过“识别-定位”的传统流程,直接构建一个类似激光雷达点云的3D几何表征,但用的是纯视觉信息。
2.2 无法回避的挑战:物理极限与“可信赖”的鸿沟
然而,无论算法如何进化,都无法改变摄像头作为被动光学传感器的物理本质。这就带来了几个根本性挑战:
- 精确测距的模糊性:视觉测距依赖于视差或运动推断,在物体纹理缺失(如光滑墙面)、距离极远或相对运动不明显时,其深度估计的置信度会大幅下降。对于高速自动驾驶,几十厘米的深度误差可能就是撞上与避开的区别。
- 极端环境的不可靠性:面对直射的夕阳、夜间对面车道的远光灯、隧道口的瞬间明暗变化、暴雨中布满水珠的镜头,视觉系统性能的衰减是陡峭且不可预测的。系统可能从“看得清”瞬间跌入“看不清”的状态。
- 系统可解释性与验证的复杂性:一个融合了激光雷达点云的世界模型,其距离信息是直接测量得到的,可验证性强。而一个纯视觉系统输出的3D占用网格,本质上是神经网络对像素的“猜想”。当系统出错时,我们很难区分是“没看到”还是“看错了”,这给安全验证、责任界定和系统调试带来了巨大困难。
因此,特斯拉路线更像是在挑战一个极度复杂的模式识别与几何推理的极限问题。它的成功,高度依赖于能否用无限的数据和超强的算力,训练出一个能够完美模拟甚至超越人类视觉皮层+大脑推理能力的“世界模型”。这是一条充满想象力但风险极高的道路。
3. 工程化落地的岔路口:成本、安全与规模化
技术路线的争论,最终要落到工程和商业的现实土壤中。在这里,两条路线的差异被进一步放大。
3.1 Waymo路线:为“无人化”安全买单
Waymo(及其代表的Robotaxi路线)的商业模式,是提供完全无人的出租车服务。这意味着安全是绝对的第一性原理,且责任完全由运营方承担。在这种前提下:
- 成本结构不同:车辆是生产资料,其传感器成本可以分摊到长期的运营里程中。一套数万美元的激光雷达组合,如果能让无人车更早、更安全地取消安全员,从而大幅降低人力成本并加速商业化,这个投资是划算的。
- 性能要求是“天花板”:系统必须能在设计运行域(ODD)内,应对几乎所有极端情况,追求的是接近100%的可靠性。多传感器融合提供的冗余,是达到这种“车规级”乃至“无人驾驶级”安全标准的几乎必然选择。
- 验证方式:依赖于高精地图先验信息+多传感器实时感知的交叉验证,构建高度确定性的驾驶环境。
3.2 特斯拉路线:为“规模化”体验迭代
特斯拉的商业模式,是出售具备辅助驾驶功能的量产车给消费者。这意味着:
- 成本是硬约束:每辆车增加一个激光雷达,可能就是数千元人民币的成本,直接影响售价和毛利率。马斯克追求的是用最低的硬件成本,通过软件更新持续提升用户体验。
- 性能要求是“地板”:目前的FSD(完全自动驾驶能力)仍属于L2+/L3级别的辅助驾驶,终极责任在驾驶员。它的目标是提供在大多数常见场景下优于人类的、平滑舒适的驾驶体验,并逐步扩大能力边界。它容忍在极端情况下需要人类接管。
- 发展路径:通过海量数据快速迭代算法,用软件能力的增长来弥补硬件的“不足”(从纯视觉角度看),并最终证明纯视觉的“天花板”足以支持全自动驾驶。这是一场与时间的赛跑。
对于开发者而言,这里的启示是:技术选型永远服务于业务目标。如果你在研发一个园区物流小车或港口自动驾驶项目,安全冗余和确定性是第一位的,多传感器融合几乎是必选项。如果你在研究下一代智能座舱的感知交互,成本敏感且对绝对安全的要求不同,那么深耕纯视觉算法可能更有价值。
4. 融合的未来:并非对立,而是分层与演进
这场争论并非一定要以一方压倒另一方告终。更可能的未来是技术路线的分层与融合。
- L4级及以上自动驾驶:在可预见的未来,多传感器融合(尤其是包含激光雷达的方案)仍将是追求“全无人、高安全”场景的主流甚至标配方案。它提供了物理层面可验证的安全底线。
- L2+/L3级智能驾驶:纯视觉方案将通过算法革新(如Occupancy Network的普及)和芯片算力提升,在成本、体验和适用场景上取得巨大优势,成为量产车的主流选择。部分高端车型可能会采用“视觉为主,激光雷达为辅”的轻融合方案,用一颗前向激光雷达来解决视觉测距的置信度问题,作为安全冗余。
- 技术本身的相互借鉴:两条路线正在相互学习。纯视觉算法在努力构建更几何化、更确定性的3D感知世界;而多传感器融合系统则在不断提升视觉语义理解的能力,并探索如何用更少的、更便宜的激光雷达(如固态激光雷达)实现同等效果。“视觉大模型的纯Transformer架构路线”所展现的强大表征学习能力,未来完全可能被用于更好地理解和融合多模态传感器数据。
对于从事自动驾驶研发的工程师来说,与其站队,不如深入理解两者的技术内核。这意味着:
- 研究视觉:不仅要懂CNN、Transformer,更要深入理解多视图几何、SLAM、神经渲染,知道如何从2D图像中“挤出”稳定可靠的3D信息。
- 研究融合:不仅要会调用ROS里的融合库,更要理解传感器模型、卡尔曼滤波、因子图优化等状态估计理论,知道如何量化不同传感器的不确定性并进行最优融合。
- 关注中间层:无论是哪种路线,最终都需要一个强大的自动驾驶平台软件架构来管理传感器数据流、任务调度、实时计算和车辆控制。这个中间层的设计与优化,是决定系统性能和稳定性的关键。
回到多尔戈夫对特斯拉的质疑,其本质是对“单一信源可靠性”的哲学性质疑。在自动驾驶这条通往未知的道路上,Waymo选择带上地图、雷达和激光雷达手电筒,而特斯拉选择极致训练自己的双眼。前者求稳,后者求进。作为行业的观察者和参与者,我们看到的不是一场胜负已分的比赛,而是一次关于如何定义机器智能、如何权衡风险与收益、以及如何将技术安全地送入普通人生活的宏大实验。这场实验的每一步进展,无论是来自融合派的稳健突破,还是来自视觉派的惊人飞跃,都在共同拓宽自动驾驶技术的边界。而我们最应该做的,是准备好自己的知识体系,去理解、去应用、去迎接那个无论以何种方式,终将到来的未来。