在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

動量感知規劃的端到端自動駕駛框架MomAD解析

地平線HorizonRobotics ? 來源:地平線HorizonRobotics ? 2025-03-18 09:31 ? 次閱讀

端到端自動駕駛框架實現了感知與規劃的無縫集成,但通常依賴于一次性軌跡預測,這可能導致控制不穩定,并且對單頓感知中的遮擋問題較為敏感。為解決這一問題,我們提出了動量感知駕駛框架Momentum-Aware Driving(MomAD),該框架引I入了軌跡動量和感知動量,以穩定和優化軌跡預測。

MomAD包含兩個核心組件:一是拓撲軌跡匹配(TTM),采用豪斯多夫距離選擇與先前路徑一致的最優規劃查詢,以確保連貫性;二是動量規劃交互器(MPI),通過交叉注意力機制將選定的規劃查詢與歷史查詢相結合,擴展靜態和動態感知文件。這種豐富的查詢反過來有助于重新生成長時間跨度的軌跡,并降低碰撞風險。為了減輕動態環境和檢測誤差帶來的噪聲,我們在訓練過程中引入了魯棒的實例去噪,使規劃模型能夠專注于關鍵信號并提高其魯棒性。我們還提出了一種新的軌跡預測一致性(TPC)指標,用于定量評估規劃的穩定性。

在nuScenes數據集上的實驗表明,MomAD在長期一致性(>3s)方面優于現有的最先進方法。此外,在精心設計的Turning-nuScenes數據集上的評估顯示,MomAD在6秒預測時間范圍內將碰撞率降低了26%,并將TPC提高了0.97米(33.45%),而在Bench2Drive上的閉環測試中,成功率提高了16.3%。

? 論文鏈接:

https://arxiv.org/abs/2503.03125

?論文代碼:

https://github.com/adept-thu/MomAD

研究背景

自動駕駛技術經歷了從模塊化到更集成化的端到端范式的轉變。傳統方法將檢測、跟蹤、地圖構建、運動預測和規劃等任務分開處理,而端到端框架則強調這些任務的無縫集成。通過優先考慮規劃,端到端框架能夠戰略性地引導來自上游感知模塊的信息,從而增強動態駕駛環境中的魯棒性和可靠性。高質量的規劃依賴于準確預測自車未來的軌跡,這需要對靜態和動態環境因素(如地圖元素和與周圍交通參與者的交互)有長遠的理解。

然而,由于其他道路使用者意圖的不確定性、道路條件的變化以及人類駕駛行為引入的模糊性,軌跡預測本質上是隨機的,這使得確定性預測變得次優甚至具有風險。現有的多模態軌跡規劃方法雖然能夠考慮多種可能的交通參與者行為,但它們通常是基于當前感知幀的一次性預測,容易受到遮擋或關鍵視覺線索丟失的影響,導致軌跡質量下降。此外,缺乏時間一致性可能導致連續軌跡缺乏連貫性,引發不穩定的車輛控制。為了解決這些問題,本文提出了動量感知駕駛框架 (MomAD) ,通過引入軌跡動量和感知動量來穩定和優化軌跡預測,從而在動態駕駛環境中實現更平滑和一致的規劃結果。

81471886-fff7-11ef-9310-92fbcf53809c.png

根據上圖對比我們可以看到,(a) 確定性規劃的方案,缺乏動作多樣性,存在安全風險;(b)多模態軌跡規劃方案,通過選擇最高分軌跡,但存在最大分數偏移問題導致穩定性不足;(c)我們提出的MomAD巧妙利用“慣性”的思想,通過動量規劃,利用歷史和感知動量提升時序一致性,解決端到端自動駕駛中不穩定行駛的問題。

研究方法

Topological Trajectory Matching

該模塊通過Hausdorff距離選擇與歷史路徑最匹配的多模態軌跡提案,以確保時序一致性和軌跡的連續性。具體來說,TTM模塊通過最小化不同時間步之間的規劃差異,防止軌跡偏離歷史軌跡。

Momentum Planning Interactor

該模塊通過長時查詢混合器將當前最佳規劃查詢與歷史規劃查詢進行交叉注意力處理,擴展靜態和動態感知文件,從而豐富當前查詢的上下文信息。MPI模塊通過結合歷史查詢和當前查詢,生成改進的軌跡預測,增強了對周圍環境的感知能力。

Robust Instance Denoising via

Perturbation

在訓練過程中引入受控噪聲擾動,使模型能夠區分關鍵和無關特征,提高對感知噪聲的魯棒性。通過這種方式,模型在測試時能夠更好地應對實例特征的波動,生成更穩定和平滑的軌跡。

81517bfa-fff7-11ef-9310-92fbcf53809c.png

結果與分析

816282c4-fff7-11ef-9310-92fbcf53809c.png

如表所示,MomAD在L2誤差、碰撞率和TPC(軌跡預測一致性)上分別達到了0.60米、0.09%和0.54米。與UniAD、VAD和SparseDrive等最先進方法相比,我們的方法在規劃結果上表現出色。值得注意的是,我們在TPC指標上取得了顯著改進,在nuScenes數據集上1秒、2秒和3秒的TPC分別提升了0.30米、0.53米和0.78米,直接證明了我們在時間一致性方面的有效性。

總體而言,MomAD有效利用了動量的平滑優勢,在提升時間一致性方面效果顯著。

816f19c6-fff7-11ef-9310-92fbcf53809c.png

準確的長軌跡預測對于提升自動駕駛的穩定性至關重要,同時也有助于評估模型解決多模態軌跡規劃中時間一致性問題的能力。如表所示,我們在nuScenes和Turning-nuScenes數據集上對比了SparseDrive和MomAD在4-6秒長軌跡預測中的表現,結果顯示MomAD在性能上有顯著提升。

具體而言,在nuScenes數據集中,與SparseDrive相比,MomAD在4秒、5秒和6秒的L2誤差分別降低了0.09米(5.14%)、0.34米(14.66%)和0.50米(16.95%),碰撞率分別降低了0.04%、0.11%和0.20%,TPC(軌跡預測一致性)分別降低了0.14米(10.53%)、0.21米(12.65%)和0.38米(19.10%)。

此外,在Turning-nuScenes數據集中,與SparseDrive相比,MomAD在4秒、5秒和6秒的L2誤差分別降低了0.27米(13.04%)、0.64米(23.62%)和0.85米(25.30%),碰撞率分別降低了0.06%、0.14%和0.26%,TPC分別降低了0.17米(11.04%)、0.73米(31.60%)和0.97米(32.45%)。

可以觀察到,MomAD在更遠距離的軌跡預測上表現顯著提升,尤其是在6秒時的改進幅度最大。總體而言,MomAD提升了長軌跡預測的性能,進一步證明了其能夠有效緩解時間一致性問題。

817ee928-fff7-11ef-9310-92fbcf53809c.png

我們已在Bench2Drive數據集上進行了具有挑戰性的閉環評估,結果如表所示。該數據集涵蓋44個交互場景,例如切入、超車、繞行,以及220條路線,覆蓋多種天氣條件和地點。我們的MomAD框架在成功率上分別比VAD多模態變體和SparseDrive分別提高了16.3%和8.4%,并在舒適度評分(軌跡平滑度)上分別提升了7.2%和5.3%,證明了其有效性。

結論

MomAD框架通過引入軌跡動量和感知動量,顯著提高了端到端自動駕駛系統在軌跡規劃中的穩定性和魯棒性。未來工作將探索擴散模型和推測解碼方法,以進一步提高軌跡多樣性和效率。

.

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 模型
    +關注

    關注

    1

    文章

    3445

    瀏覽量

    49705
  • 數據集
    +關注

    關注

    4

    文章

    1218

    瀏覽量

    25157
  • 自動駕駛
    +關注

    關注

    788

    文章

    14085

    瀏覽量

    168499

原文標題:CVPR 2025|MomAD:動量感知規劃的端到端自動駕駛

文章出處:【微信號:horizonrobotics,微信公眾號:地平線HorizonRobotics】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    自動駕駛中基于規則的決策和大模型有何區別?

    自動駕駛架構的選擇上,也經歷了從感知、決策控制、執行的三段式架構到現在火熱的大模型,尤其是在2024年特斯拉推出FSD V12后,各
    的頭像 發表于 04-13 09:38 ?1108次閱讀
    <b class='flag-5'>自動駕駛</b>中基于規則的決策和<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>大模型有何區別?

    未來已來,多傳感器融合感知自動駕駛破局的關鍵

    巨大的進展;自動駕駛開始摒棄手動編碼規則和機器學習模型的方法,轉向全面采用的神經網絡AI系統,它能模仿學習人類司機的駕駛,遇到場景直接
    發表于 04-11 10:26

    自動駕駛的到來

    得益于2025規劃,中國整車廠與Tier1目前對于自動駕駛有極大的熱忱及投入,有機會在這個領域實現彎道超車。目前的顧慮在于法規政策的制定,以及中國特色的交通情況帶給自動駕駛的挑戰。安全問題  目前主要
    發表于 06-08 15:25

    即插即用的自動駕駛LiDAR感知算法盒子 RS-Box

    ,即可快速、無縫地將激光雷達感知模塊嵌入自己的無人駕駛方案中,真正實現“一鍵獲得自動駕駛激光雷達環境感知能力”。RS-BoxLiDAR
    發表于 12-15 14:20

    智能感知方案怎么幫助實現安全的自動駕駛

    未來,自動駕駛將不再是科幻電影里的橋段,這是未來汽車的一個趨勢,感知自動駕駛的重要組成部分,同時安全性至關重要。作為全球第7大汽車半導體供應商,安森美半導體提供全面的智能感知方案,包
    發表于 07-31 07:11

    自動駕駛技術的實現

    的帶寬有了更高的要求。從而使用以太網技術及中央域控制(Domain)和區域控制(Zonal)架構是下一代車載網絡的發展方向。然而對于自動駕駛技術的實現,涉及感知規劃、執行三個層面。
    發表于 09-03 08:31

    如何基于深度神經網絡設計一個自動駕駛模型?

    如何基于深度神經網絡設計一個自動駕駛模型?如何設計一個基于增強學習的自動駕駛決策系統?
    的頭像 發表于 04-29 16:44 ?5122次閱讀
    如何基于深度神經網絡設計一個<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>的<b class='flag-5'>自動駕駛</b>模型?

    自動駕駛到底是什么?

    UniAD 統一自動駕駛關鍵任務,但是的訓練難度極大,對數據的要求和工程能力的要求比常規的技術棧要高,但是由此帶來的全局一致性讓整個系統變得更加簡潔,也能夠防止某個模塊進入局部最
    發表于 06-28 14:47 ?4108次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>到底是什么?

    基于矢量化場景表征的自動駕駛算法框架

    在ICCV 2023上,地平線和華中科技大學提出基于矢量化場景表征的自動駕駛算法——VAD。VAD擯棄了柵格化表征,對整個駕駛場景進行
    發表于 08-31 09:28 ?1416次閱讀
    基于矢量化場景表征的<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>算法<b class='flag-5'>框架</b>

    理想汽車自動駕駛模型實現

    理想汽車在感知、跟蹤、預測、決策和規劃等方面都進行了模型化,最終實現了的模型。這種模型不僅完全模型化,還能夠虛擬化,即在模擬環境中進行
    發表于 04-12 12:17 ?591次閱讀
    理想汽車<b class='flag-5'>自動駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>模型實現

    理想汽車加速自動駕駛布局,成立“”實體組織

    近期,理想汽車在其智能駕駛領域邁出了重要一步,正式成立了專注于“自動駕駛”的實體組織,該組織規模超過200人,標志著理想在
    的頭像 發表于 07-17 15:42 ?1488次閱讀

    實現自動駕駛,唯有

    ,去年行業主流方案還是輕高精地圖城區智駕,今年大家的目標都瞄到了(End-to-End, E2E)。
    的頭像 發表于 08-12 09:14 ?1117次閱讀
    實現<b class='flag-5'>自動駕駛</b>,唯有<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>?

    Mobileye自動駕駛解決方案的深度解析

    強大的技術優勢。 Mobileye的解決方案概述 1.1 什么是
    的頭像 發表于 10-17 09:35 ?665次閱讀
    Mobileye<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>解決方案的深度<b class='flag-5'>解析</b>

    連接視覺語言大模型與自動駕駛

    自動駕駛在大規模駕駛數據上訓練,展現出很強的決策規劃能力,但是面對復雜罕見的
    的頭像 發表于 11-07 15:15 ?525次閱讀
    連接視覺語言大模型與<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動駕駛</b>

    自動駕駛技術研究與分析

    編者語:「智駕最前沿」微信公眾號后臺回復:C-0450,獲取本文參考報告:《自動駕駛行業研究報告》pdf下載方式。 自動駕駛進入202
    的頭像 發表于 12-19 13:07 ?608次閱讀
    主站蜘蛛池模板: 国产好深好硬好爽我还要视频 | 国产精品免费视频拍拍拍 | 免费一级毛片 | 伊人久久综合成人亚洲 | 久久精品视频5 | 色多多视频在线观看播放 | 成人三级网址 | 免费国产综合视频在线看 | 亚洲福利在线视频 | 午夜性刺激免费视频观看不卡专区 | 中文字幕一区在线观看 | 免费视频一区二区 | 中文字幕在线观看日剧网 | 综合五月天婷婷丁香 | 免费亚洲一区 | 亚洲福利视频网址 | 日本免费人成在线网站 | 国产女主播在线播放一区二区 | 亚色视频在线 | 视频一区二区在线播放 | 日韩精品一区二区在线观看 | www.四虎影院在线观看 | 午夜欧美| 日本一区二区免费看 | 天堂在线最新资源 | 在线视频一区二区三区四区 | 午夜剧场一级片 | 999av视频| 亚洲视频一区二区三区 | 欧美jizz大又粗 | 国产传媒在线观看视频免费观看 | 特级生活片 | 亚洲www| 最近高清在线视频观看免费 | 久久精品男人的天堂 | 国产农村妇女毛片精品久久久 | 夜夜爽爽 | 永久看片 | 天堂8中文在线bt | 中文字幕一区二区三区视频在线 | 人成电影免费观看在线 |