在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

動(dòng)量感知規(guī)劃的端到端自動(dòng)駕駛框架MomAD解析

地平線HorizonRobotics ? 來源:地平線HorizonRobotics ? 2025-03-18 09:31 ? 次閱讀

端到端自動(dòng)駕駛框架實(shí)現(xiàn)了感知與規(guī)劃的無縫集成,但通常依賴于一次性軌跡預(yù)測(cè),這可能導(dǎo)致控制不穩(wěn)定,并且對(duì)單頓感知中的遮擋問題較為敏感。為解決這一問題,我們提出了動(dòng)量感知駕駛框架Momentum-Aware Driving(MomAD),該框架引I入了軌跡動(dòng)量和感知?jiǎng)恿浚苑€(wěn)定和優(yōu)化軌跡預(yù)測(cè)。

MomAD包含兩個(gè)核心組件:一是拓?fù)滠壽E匹配(TTM),采用豪斯多夫距離選擇與先前路徑一致的最優(yōu)規(guī)劃查詢,以確保連貫性;二是動(dòng)量規(guī)劃交互器(MPI),通過交叉注意力機(jī)制將選定的規(guī)劃查詢與歷史查詢相結(jié)合,擴(kuò)展靜態(tài)和動(dòng)態(tài)感知文件。這種豐富的查詢反過來有助于重新生成長(zhǎng)時(shí)間跨度的軌跡,并降低碰撞風(fēng)險(xiǎn)。為了減輕動(dòng)態(tài)環(huán)境和檢測(cè)誤差帶來的噪聲,我們?cè)谟?xùn)練過程中引入了魯棒的實(shí)例去噪,使規(guī)劃模型能夠?qū)W⒂陉P(guān)鍵信號(hào)并提高其魯棒性。我們還提出了一種新的軌跡預(yù)測(cè)一致性(TPC)指標(biāo),用于定量評(píng)估規(guī)劃的穩(wěn)定性。

在nuScenes數(shù)據(jù)集上的實(shí)驗(yàn)表明,MomAD在長(zhǎng)期一致性(>3s)方面優(yōu)于現(xiàn)有的最先進(jìn)方法。此外,在精心設(shè)計(jì)的Turning-nuScenes數(shù)據(jù)集上的評(píng)估顯示,MomAD在6秒預(yù)測(cè)時(shí)間范圍內(nèi)將碰撞率降低了26%,并將TPC提高了0.97米(33.45%),而在Bench2Drive上的閉環(huán)測(cè)試中,成功率提高了16.3%。

? 論文鏈接:

https://arxiv.org/abs/2503.03125

?論文代碼:

https://github.com/adept-thu/MomAD

研究背景

自動(dòng)駕駛技術(shù)經(jīng)歷了從模塊化到更集成化的端到端范式的轉(zhuǎn)變。傳統(tǒng)方法將檢測(cè)、跟蹤、地圖構(gòu)建、運(yùn)動(dòng)預(yù)測(cè)和規(guī)劃等任務(wù)分開處理,而端到端框架則強(qiáng)調(diào)這些任務(wù)的無縫集成。通過優(yōu)先考慮規(guī)劃,端到端框架能夠戰(zhàn)略性地引導(dǎo)來自上游感知模塊的信息,從而增強(qiáng)動(dòng)態(tài)駕駛環(huán)境中的魯棒性和可靠性。高質(zhì)量的規(guī)劃依賴于準(zhǔn)確預(yù)測(cè)自車未來的軌跡,這需要對(duì)靜態(tài)和動(dòng)態(tài)環(huán)境因素(如地圖元素和與周圍交通參與者的交互)有長(zhǎng)遠(yuǎn)的理解。

然而,由于其他道路使用者意圖的不確定性、道路條件的變化以及人類駕駛行為引入的模糊性,軌跡預(yù)測(cè)本質(zhì)上是隨機(jī)的,這使得確定性預(yù)測(cè)變得次優(yōu)甚至具有風(fēng)險(xiǎn)。現(xiàn)有的多模態(tài)軌跡規(guī)劃方法雖然能夠考慮多種可能的交通參與者行為,但它們通常是基于當(dāng)前感知幀的一次性預(yù)測(cè),容易受到遮擋或關(guān)鍵視覺線索丟失的影響,導(dǎo)致軌跡質(zhì)量下降。此外,缺乏時(shí)間一致性可能導(dǎo)致連續(xù)軌跡缺乏連貫性,引發(fā)不穩(wěn)定的車輛控制。為了解決這些問題,本文提出了動(dòng)量感知駕駛框架 (MomAD) ,通過引入軌跡動(dòng)量和感知?jiǎng)恿縼矸€(wěn)定和優(yōu)化軌跡預(yù)測(cè),從而在動(dòng)態(tài)駕駛環(huán)境中實(shí)現(xiàn)更平滑和一致的規(guī)劃結(jié)果。

81471886-fff7-11ef-9310-92fbcf53809c.png

根據(jù)上圖對(duì)比我們可以看到,(a) 確定性規(guī)劃的方案,缺乏動(dòng)作多樣性,存在安全風(fēng)險(xiǎn);(b)多模態(tài)軌跡規(guī)劃方案,通過選擇最高分軌跡,但存在最大分?jǐn)?shù)偏移問題導(dǎo)致穩(wěn)定性不足;(c)我們提出的MomAD巧妙利用“慣性”的思想,通過動(dòng)量規(guī)劃,利用歷史和感知?jiǎng)恿刻嵘龝r(shí)序一致性,解決端到端自動(dòng)駕駛中不穩(wěn)定行駛的問題。

研究方法

Topological Trajectory Matching

該模塊通過Hausdorff距離選擇與歷史路徑最匹配的多模態(tài)軌跡提案,以確保時(shí)序一致性和軌跡的連續(xù)性。具體來說,TTM模塊通過最小化不同時(shí)間步之間的規(guī)劃差異,防止軌跡偏離歷史軌跡。

Momentum Planning Interactor

該模塊通過長(zhǎng)時(shí)查詢混合器將當(dāng)前最佳規(guī)劃查詢與歷史規(guī)劃查詢進(jìn)行交叉注意力處理,擴(kuò)展靜態(tài)和動(dòng)態(tài)感知文件,從而豐富當(dāng)前查詢的上下文信息。MPI模塊通過結(jié)合歷史查詢和當(dāng)前查詢,生成改進(jìn)的軌跡預(yù)測(cè),增強(qiáng)了對(duì)周圍環(huán)境的感知能力。

Robust Instance Denoising via

Perturbation

在訓(xùn)練過程中引入受控噪聲擾動(dòng),使模型能夠區(qū)分關(guān)鍵和無關(guān)特征,提高對(duì)感知噪聲的魯棒性。通過這種方式,模型在測(cè)試時(shí)能夠更好地應(yīng)對(duì)實(shí)例特征的波動(dòng),生成更穩(wěn)定和平滑的軌跡。

81517bfa-fff7-11ef-9310-92fbcf53809c.png

結(jié)果與分析

816282c4-fff7-11ef-9310-92fbcf53809c.png

如表所示,MomAD在L2誤差、碰撞率和TPC(軌跡預(yù)測(cè)一致性)上分別達(dá)到了0.60米、0.09%和0.54米。與UniAD、VAD和SparseDrive等最先進(jìn)方法相比,我們的方法在規(guī)劃結(jié)果上表現(xiàn)出色。值得注意的是,我們?cè)赥PC指標(biāo)上取得了顯著改進(jìn),在nuScenes數(shù)據(jù)集上1秒、2秒和3秒的TPC分別提升了0.30米、0.53米和0.78米,直接證明了我們?cè)跁r(shí)間一致性方面的有效性。

總體而言,MomAD有效利用了動(dòng)量的平滑優(yōu)勢(shì),在提升時(shí)間一致性方面效果顯著。

816f19c6-fff7-11ef-9310-92fbcf53809c.png

準(zhǔn)確的長(zhǎng)軌跡預(yù)測(cè)對(duì)于提升自動(dòng)駕駛的穩(wěn)定性至關(guān)重要,同時(shí)也有助于評(píng)估模型解決多模態(tài)軌跡規(guī)劃中時(shí)間一致性問題的能力。如表所示,我們?cè)趎uScenes和Turning-nuScenes數(shù)據(jù)集上對(duì)比了SparseDrive和MomAD在4-6秒長(zhǎng)軌跡預(yù)測(cè)中的表現(xiàn),結(jié)果顯示MomAD在性能上有顯著提升。

具體而言,在nuScenes數(shù)據(jù)集中,與SparseDrive相比,MomAD在4秒、5秒和6秒的L2誤差分別降低了0.09米(5.14%)、0.34米(14.66%)和0.50米(16.95%),碰撞率分別降低了0.04%、0.11%和0.20%,TPC(軌跡預(yù)測(cè)一致性)分別降低了0.14米(10.53%)、0.21米(12.65%)和0.38米(19.10%)。

此外,在Turning-nuScenes數(shù)據(jù)集中,與SparseDrive相比,MomAD在4秒、5秒和6秒的L2誤差分別降低了0.27米(13.04%)、0.64米(23.62%)和0.85米(25.30%),碰撞率分別降低了0.06%、0.14%和0.26%,TPC分別降低了0.17米(11.04%)、0.73米(31.60%)和0.97米(32.45%)。

可以觀察到,MomAD在更遠(yuǎn)距離的軌跡預(yù)測(cè)上表現(xiàn)顯著提升,尤其是在6秒時(shí)的改進(jìn)幅度最大。總體而言,MomAD提升了長(zhǎng)軌跡預(yù)測(cè)的性能,進(jìn)一步證明了其能夠有效緩解時(shí)間一致性問題。

817ee928-fff7-11ef-9310-92fbcf53809c.png

我們已在Bench2Drive數(shù)據(jù)集上進(jìn)行了具有挑戰(zhàn)性的閉環(huán)評(píng)估,結(jié)果如表所示。該數(shù)據(jù)集涵蓋44個(gè)交互場(chǎng)景,例如切入、超車、繞行,以及220條路線,覆蓋多種天氣條件和地點(diǎn)。我們的MomAD框架在成功率上分別比VAD多模態(tài)變體和SparseDrive分別提高了16.3%和8.4%,并在舒適度評(píng)分(軌跡平滑度)上分別提升了7.2%和5.3%,證明了其有效性。

結(jié)論

MomAD框架通過引入軌跡動(dòng)量和感知?jiǎng)恿浚@著提高了端到端自動(dòng)駕駛系統(tǒng)在軌跡規(guī)劃中的穩(wěn)定性和魯棒性。未來工作將探索擴(kuò)散模型和推測(cè)解碼方法,以進(jìn)一步提高軌跡多樣性和效率。

.

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 模型
    +關(guān)注

    關(guān)注

    1

    文章

    3427

    瀏覽量

    49515
  • 數(shù)據(jù)集
    +關(guān)注

    關(guān)注

    4

    文章

    1214

    瀏覽量

    25021
  • 自動(dòng)駕駛
    +關(guān)注

    關(guān)注

    788

    文章

    14021

    瀏覽量

    167921

原文標(biāo)題:CVPR 2025|MomAD:動(dòng)量感知規(guī)劃的端到端自動(dòng)駕駛

文章出處:【微信號(hào):horizonrobotics,微信公眾號(hào):地平線HorizonRobotics】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    未來已來,多傳感器融合感知自動(dòng)駕駛破局的關(guān)鍵

    巨大的進(jìn)展;自動(dòng)駕駛開始摒棄手動(dòng)編碼規(guī)則和機(jī)器學(xué)習(xí)模型的方法,轉(zhuǎn)向全面采用的神經(jīng)網(wǎng)絡(luò)AI系統(tǒng),它能模仿學(xué)習(xí)人類司機(jī)的駕駛,遇到場(chǎng)景直接
    發(fā)表于 04-11 10:26

    自動(dòng)駕駛的到來

    得益于2025規(guī)劃,中國整車廠與Tier1目前對(duì)于自動(dòng)駕駛有極大的熱忱及投入,有機(jī)會(huì)在這個(gè)領(lǐng)域?qū)崿F(xiàn)彎道超車。目前的顧慮在于法規(guī)政策的制定,以及中國特色的交通情況帶給自動(dòng)駕駛的挑戰(zhàn)。安全問題  目前主要
    發(fā)表于 06-08 15:25

    即插即用的自動(dòng)駕駛LiDAR感知算法盒子 RS-Box

    ,即可快速、無縫地將激光雷達(dá)感知模塊嵌入自己的無人駕駛方案中,真正實(shí)現(xiàn)“一鍵獲得自動(dòng)駕駛激光雷達(dá)環(huán)境感知能力”。RS-BoxLiDAR
    發(fā)表于 12-15 14:20

    智能感知方案怎么幫助實(shí)現(xiàn)安全的自動(dòng)駕駛

    未來,自動(dòng)駕駛將不再是科幻電影里的橋段,這是未來汽車的一個(gè)趨勢(shì),感知自動(dòng)駕駛的重要組成部分,同時(shí)安全性至關(guān)重要。作為全球第7大汽車半導(dǎo)體供應(yīng)商,安森美半導(dǎo)體提供全面的智能感知方案,包
    發(fā)表于 07-31 07:11

    自動(dòng)駕駛技術(shù)的實(shí)現(xiàn)

    的帶寬有了更高的要求。從而使用以太網(wǎng)技術(shù)及中央域控制(Domain)和區(qū)域控制(Zonal)架構(gòu)是下一代車載網(wǎng)絡(luò)的發(fā)展方向。然而對(duì)于自動(dòng)駕駛技術(shù)的實(shí)現(xiàn),涉及感知規(guī)劃、執(zhí)行三個(gè)層面。
    發(fā)表于 09-03 08:31

    如何基于深度神經(jīng)網(wǎng)絡(luò)設(shè)計(jì)一個(gè)自動(dòng)駕駛模型?

    如何基于深度神經(jīng)網(wǎng)絡(luò)設(shè)計(jì)一個(gè)自動(dòng)駕駛模型?如何設(shè)計(jì)一個(gè)基于增強(qiáng)學(xué)習(xí)的自動(dòng)駕駛決策系統(tǒng)?
    的頭像 發(fā)表于 04-29 16:44 ?5074次閱讀
    如何基于深度神經(jīng)網(wǎng)絡(luò)設(shè)計(jì)一個(gè)<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>的<b class='flag-5'>自動(dòng)駕駛</b>模型?

    PowerBEV的高效新型框架基于流變形的后處理方法

    ? 摘要 準(zhǔn)確地感知物體實(shí)例并預(yù)測(cè)它們未來的運(yùn)動(dòng)是自動(dòng)駕駛車輛的關(guān)鍵任務(wù),使它們能夠在復(fù)雜的城市交通中安全導(dǎo)航。雖然鳥瞰圖(BEV)表示在自動(dòng)駕駛感知中是常見的,但它們?cè)谶\(yùn)動(dòng)預(yù)測(cè)中的潛
    的頭像 發(fā)表于 06-25 16:06 ?711次閱讀
    PowerBEV的高效新型<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>框架</b>基于流變形的后處理方法

    自動(dòng)駕駛到底是什么?

    UniAD 統(tǒng)一自動(dòng)駕駛關(guān)鍵任務(wù),但是的訓(xùn)練難度極大,對(duì)數(shù)據(jù)的要求和工程能力的要求比常規(guī)的技術(shù)棧要高,但是由此帶來的全局一致性讓整個(gè)系統(tǒng)變得更加簡(jiǎn)潔,也能夠防止某個(gè)模塊進(jìn)入局部最
    發(fā)表于 06-28 14:47 ?4002次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>到底是什么?

    基于矢量化場(chǎng)景表征的自動(dòng)駕駛算法框架

    在ICCV 2023上,地平線和華中科技大學(xué)提出基于矢量化場(chǎng)景表征的自動(dòng)駕駛算法——VAD。VAD擯棄了柵格化表征,對(duì)整個(gè)駕駛場(chǎng)景進(jìn)行
    發(fā)表于 08-31 09:28 ?1327次閱讀
    基于矢量化場(chǎng)景表征的<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>算法<b class='flag-5'>框架</b>

    理想汽車自動(dòng)駕駛模型實(shí)現(xiàn)

    理想汽車在感知、跟蹤、預(yù)測(cè)、決策和規(guī)劃等方面都進(jìn)行了模型化,最終實(shí)現(xiàn)了的模型。這種模型不僅完全模型化,還能夠虛擬化,即在模擬環(huán)境中進(jìn)行
    發(fā)表于 04-12 12:17 ?566次閱讀
    理想汽車<b class='flag-5'>自動(dòng)駕駛</b><b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>模型實(shí)現(xiàn)

    理想汽車加速自動(dòng)駕駛布局,成立“”實(shí)體組織

    近期,理想汽車在其智能駕駛領(lǐng)域邁出了重要一步,正式成立了專注于“自動(dòng)駕駛”的實(shí)體組織,該組織規(guī)模超過200人,標(biāo)志著理想在
    的頭像 發(fā)表于 07-17 15:42 ?1450次閱讀

    實(shí)現(xiàn)自動(dòng)駕駛,唯有

    ,去年行業(yè)主流方案還是輕高精地圖城區(qū)智駕,今年大家的目標(biāo)都瞄到了(End-to-End, E2E)。
    的頭像 發(fā)表于 08-12 09:14 ?1011次閱讀
    實(shí)現(xiàn)<b class='flag-5'>自動(dòng)駕駛</b>,唯有<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b>?

    Mobileye自動(dòng)駕駛解決方案的深度解析

    強(qiáng)大的技術(shù)優(yōu)勢(shì)。 Mobileye的解決方案概述 1.1 什么是
    的頭像 發(fā)表于 10-17 09:35 ?591次閱讀
    Mobileye<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>解決方案的深度<b class='flag-5'>解析</b>

    連接視覺語言大模型與自動(dòng)駕駛

    自動(dòng)駕駛在大規(guī)模駕駛數(shù)據(jù)上訓(xùn)練,展現(xiàn)出很強(qiáng)的決策規(guī)劃能力,但是面對(duì)復(fù)雜罕見的
    的頭像 發(fā)表于 11-07 15:15 ?445次閱讀
    連接視覺語言大模型與<b class='flag-5'>端</b><b class='flag-5'>到</b><b class='flag-5'>端</b><b class='flag-5'>自動(dòng)駕駛</b>

    自動(dòng)駕駛技術(shù)研究與分析

    編者語:「智駕最前沿」微信公眾號(hào)后臺(tái)回復(fù):C-0450,獲取本文參考報(bào)告:《自動(dòng)駕駛行業(yè)研究報(bào)告》pdf下載方式。 自動(dòng)駕駛進(jìn)入202
    的頭像 發(fā)表于 12-19 13:07 ?470次閱讀
    主站蜘蛛池模板: 亚洲综合狠狠 | 国产精品爱啪在线线免费观看 | 深夜释放自己vlog糖心旧版本 | 日本一视频一区视频二区 | 丁香六月婷婷精品免费观看 | 天天干夜夜谢 | 日本wwwwwwwww| 欧洲成人r片在线观看 | 久久就是精品 | 失禁h啪肉尿出来高h健身房 | 人人免费操 | 天天色踪合合 | 久久婷婷六月 | 久久久久无码国产精品一区 | 美女被视频网站在线看九色 | 中文字幕一区二区在线观看 | 成人精品一区二区三区电影 | 色噜噜狠狠大色综合 | 真人午夜a一级毛片 | 午夜视频在线观看一区二区 | 电影一区二区三区 | 色无欲天天天影视综合网 | 韩国三级床戏合集 | 亚洲精品久久久久久久蜜桃 | 性欧美暴力猛交69hd | 日本不卡高清免费v日本 | 中文字幕亚洲天堂 | 夜夜夜精品视频免费 | 亚洲国产高清人在线 | 三级在线观看免播放网站 | 丁香激情综合网 | 精品三级网站 | 色视频网站色视频播放 | 亚洲 欧美 中文字幕 | 精品黄色片 | 性欧美高清久久久久久久 | avtt天堂网 手机资源 | 视频亚洲一区 | 欧洲不卡一卡2卡三卡4卡网站 | 久久久香蕉视频 | 天天干狠狠操 |