news 2026/2/22 20:09:19

【论文阅读】SparseDrive: End-to-End Autonomous Driving via Sparse Scene Representation

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
【论文阅读】SparseDrive: End-to-End Autonomous Driving via Sparse Scene Representation

标题:SparseDrive: End-to-End Autonomous Driving via Sparse Scene Representation
作者:Wenchao Sun Xuewu Lin Yining Shi Chuang Zhang Haoran Wu Sifa Zheng

moviation

作者觉得成熟的模块化自动驾驶系统被分解为不同的独立任务,例如感知、预测和规划,从而导致模块间信息丢失和错误累积。相比之下,端到端范式将多任务统一到一个完全可微分的框架中,从而允许以规划为导向进行优化。尽管端到端范式具有巨大潜力,但现有方法的性能和效率都不令人满意,特别是在规划安全方面。作者觉得BEV方案的计算代价太高且模型设计太简单了。因此,作者搞了一个稀疏的sparseDrive模型,又快又好。

methods


是由三部分组成:图像编码器、对称稀疏感知和并行运动规划器;
在对称稀疏感知模块中,特征图被聚合成两组实例,来学习驾驶场景的稀疏表示。这两组实例分别代表周围的智能体和地图元素,被输入到并行运动规划器中,与初始化的自我实例进行交互。运动规划器同时预测周围智能体和自身车辆的多模态轨迹,并通过分层规划选择策略选择一条安全轨迹作为最终规划结果。
Symmetric Sparse Perception:

右边Sparse Detection和左边Sparse Online Mapping,都用相同的sparse4d结构的模型,训练方式也同于sparse4dv3, 只是特征变量不一样:

跟踪也是用的sparse4dv3里面的策略;

Parallel Motion Planner:

作者用前视最小特征图和自车状态进行初始化,并把自车和他车及周围环境信息concat在一起行车整个规划的环境模型;最后做预测和规划。**Hierarchical Planning Selection:**现在有了多模态规划轨迹方案,为了选择一个安全的轨迹,设计了一个分层规划选择策略。首先,选择一个轨迹方案子集 ,对应于高级命令 。然后,采用一种新颖的碰撞感知重新评分模块来确保安全性。利用运动预测结果,我们可以评估每个规划轨迹方案的碰撞风险,对于碰撞概率高的轨迹,我们降低该轨迹的分数。在实践中,我们简单地将碰撞轨迹的分数设置为0。最后,我们选择得分最高的轨迹作为最终的规划输出。

training:
SparseDrive 的训练分为两个阶段。在阶段 1 中,从头开始训练对称稀疏感知模块,以学习稀疏场景表示。在阶段 2 中,稀疏感知模块和并行运动规划器一起训练,没有模型权重冻结,充分感受端到端优化的好处。配置config文件即可:

loss:
另外,作者加了深度预测分支;

code 赏析




experiments

如作者说的,与其他模型相比,拉开了很大的差距。

其他发现:

【完结】

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/2/22 5:37:16

音乐时光机:LRCGET让离线歌曲重获灵魂,体验完美歌词同步

音乐时光机:LRCGET让离线歌曲重获灵魂,体验完美歌词同步 【免费下载链接】lrcget Utility for mass-downloading LRC synced lyrics for your offline music library. 项目地址: https://gitcode.com/gh_mirrors/lr/lrcget 还在为本地音乐库中那些…

作者头像 李华
网站建设 2026/2/16 9:38:40

AI原生应用安全防护:量子计算时代的AI安全前瞻

AI原生应用安全防护:量子计算时代的AI安全前瞻关键词:AI原生应用、安全防护、量子计算、AI安全、前瞻摘要:本文围绕AI原生应用安全防护在量子计算时代的情况展开探讨。先介绍了背景信息,包括目的、预期读者等内容。接着阐述核心概…

作者头像 李华
网站建设 2026/2/21 6:35:32

艾尔登法环存档无损迁移:告别游戏进度丢失的终极方案

艾尔登法环存档无损迁移:告别游戏进度丢失的终极方案 【免费下载链接】EldenRingSaveCopier 项目地址: https://gitcode.com/gh_mirrors/el/EldenRingSaveCopier 当你投入数百小时在《艾尔登法环》的世界中,每个角色都承载着你的冒险记忆。然而更…

作者头像 李华
网站建设 2026/2/22 16:19:01

如何5分钟找回压缩包密码:ArchivePasswordTestTool终极指南

你是否曾经因为忘记重要压缩包的密码而焦虑不安?那些珍贵的照片、重要的工作文档,就因为一个密码而被困在压缩包中无法访问。别担心,ArchivePasswordTestTool正是为你量身定制的解决方案。 【免费下载链接】ArchivePasswordTestTool 利用7zip…

作者头像 李华
网站建设 2026/2/20 16:25:18

ImageGlass:重新定义Windows图片查看体验的轻量级神器

ImageGlass:重新定义Windows图片查看体验的轻量级神器 【免费下载链接】ImageGlass 🏞 A lightweight, versatile image viewer 项目地址: https://gitcode.com/gh_mirrors/im/ImageGlass 还在为Windows系统自带的图片查看器功能单一、启动缓慢而…

作者头像 李华
网站建设 2026/2/20 17:53:21

Godot卡牌游戏框架:从零到专业的完整开发指南

Godot卡牌游戏框架:从零到专业的完整开发指南 【免费下载链接】godot-card-game-framework A framework which comes with prepared scenes and classes to kickstart your card game, as well as a powerful scripting engine to use to provide full rules enforc…

作者头像 李华