在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

采用可更新且具區分度錨點的多模態運動預測研究

地平線HorizonRobotics ? 來源:地平線HorizonRobotics ? 2025-04-01 10:32 ? 次閱讀

混合模型(Mixture Models)是一種強大的工具,能夠有效表征多模態分布(Multimodality)。根據正組分(Positive Mixture Component)匹配方式,主流的混合模型方法主要分為兩類:基于錨點(Anchor-Based)匹配和基于預測(Prediction-Based)匹配。然而,Prediction-Based方法存在預測聚類現象,難以選擇具有代表性的預測結果;而Anchor-Based方法則回歸精度受限。

本文提出了一種全新的混合模型正組分匹配范式:可更新且具區分度錨點(EDA,Evolvingand Distinct Anchors),巧妙結合上述兩類方法的優勢,實現更高效的多峰分布學習。我們在多模態運動預測(Multimodal Motion Prediction)任務上進行了廣泛實驗。實驗結果表明,EDA方法(單模型)在Waymo Motion Prediction Challenge中展現了優秀的性能。

? 原文鏈接:

https://ojs.aaai.org/index.php/AAAI/article/view/28130

?代碼鏈接:

https://github.com/Longzhong-Lin/EDA

多模態運動預測

自動駕駛領域,運動預測 (Motion Prediction) 是一個重要任務,它有助于場景理解和安全決策。該任務利用歷史狀態和道路地圖來預測目標智能體的未來軌跡。其主要挑戰來自未來行為的多模態性 (Multimodality) ,即智能體在相同環境和狀態下可能展現出多種不同的行為模式。

e2bbf944-0bbc-11f0-9310-92fbcf53809c.png

圖表1 智能體在相同環境和狀態下可能展現出多種不同的行為模式

混合模型與正樣本匹配

近年來,混合模型 (Mixture Model)例如高斯混合模型 (GMM) 已成為表征多峰未來行為分布的主流方法。混合模型通常采用“贏家通吃”的回歸損失和分類損失,這需要明確混合組分 (Mixture Component) 中的正負樣本,來作為分類損失的標簽,以及計算正組分對應預測軌跡的回歸損失。那么根據正樣本匹配的方式,當前主流的混合模型方法可以分為兩類:基于預測 (Prediction-Based)匹配和基于錨點 (Anchor-Based)匹配。

Prediction-Based / Anchor-Free選擇與真實軌跡 (Ground Truth) 最接近的預測軌跡,將其所對應的混合組分作為正樣本。這類方法生成的預測結果能夠真實反映未來行為的高度不確定性,但生成的軌跡往往會聚集在最有可能的區域,且具有相似的得分。這種現象導致模型難以選擇具有代表性的軌跡,不利于下游任務。

Anchor-Based:將各個混合組分與預定義的錨點 (Anchor) 相關聯,并選擇與Ground Truth最接近的錨點所對應組分作為正樣本。錨點的引入顯著降低了分類(即給混合組分評分)的優化難度,同時預測軌跡將傾向于生成在對應的錨點附近。為了降低計算成本并保證評分性能,錨點的分布通常會比Prediction-Based方法生成的軌跡更稀疏,這種稀疏性則限制了模型的軌跡回歸能力。

e2cc2d46-0bbc-11f0-9310-92fbcf53809c.png

圖表2 不同正樣本匹配范式的結果

可更新且具區分度錨點 (EDA)

在本文中,我們提出了一種全新的混合模型正樣本匹配范式:可更新且具區分度錨點 (EDA, Evolving and Distinct Anchors)

e2dd5328-0bbc-11f0-9310-92fbcf53809c.png

圖表3 EDA:全新的混合模型正樣本匹配范式

可更新錨點 (Evolving Anchors)

對于Evolving Anchors,我們引入錨點并通過中間預測結果對其進行動態更新,使錨點能夠根據具體場景上下文信息進行自適應調整,從而在保留空間先驗的同時提升了模型的靈活性。

e2f57aca-0bbc-11f0-9310-92fbcf53809c.png

圖4 Evolving Anchors的作用

具區分度錨點 (Distinct Anchors)

隨著錨點的動態更新,我們觀察到了類似Prediction-Based方法的預測結果聚集現象。

e303fa78-0bbc-11f0-9310-92fbcf53809c.png

圖表5 Evolving Anchors中的預測軌跡聚集現象

為了緩解預測聚集引發的分類標簽歧義性問題(即對于相近的2個組分,有可能一個被標記為正樣本,而另一個被標記為負樣本),我們借鑒目標檢測領域中的DDQ方法,提出先從錨點中篩選出Distinct Anchors,再將這些錨點與Ground Truth進行匹配。

e315a156-0bbc-11f0-9310-92fbcf53809c.png

圖表6 可更新且具區分度錨點 (EDA, Evolving and Distinct Anchors)

實驗結果

消融實驗

隨著錨點更新頻率的增加,模型的回歸能力在逐步增長,并且錨點的每次更新都會帶來顯著的回歸精度提升。

e323c984-0bbc-11f0-9310-92fbcf53809c.png

圖表7 隨著錨點更新頻率的增加,模型的回歸能力在逐步提升

軌跡聚集問題確實影響了Evolving Anchors的軌跡評分能力,導致模型的Top-6軌跡預測指標尤其是mAP (mean Average Precision) 出現衰減;而Distinct Anchors的引入則如預期一樣,全面且顯著地提升了模型的Top-6軌跡預測指標。

e32e9846-0bbc-11f0-9310-92fbcf53809c.png

圖表8 消融模型的Top-6指標

對比實驗

在Waymo Open Motion Dataset上,EDA的單模型表現超越了之前的Ensemble-Free方法,在所有指標上均優于基線模型MTR,特別是在Miss Rate上實現了13.5%的相對降低。此外,EDA還超越了MTR++,后者為改進網絡結構的MTR升級方法。

e345f6c6-0bbc-11f0-9310-92fbcf53809c.png

圖標9 Benchmark結果

總結與展望

本文針對軌跡預測中Mixture Model存在模態坍縮和精度不足的問題進行了研究,提出了一種新的正負樣本匹配策略——Evolving and Distinct Anchors來解決該問題,保證了軌跡預測模型在具備較高模態豐富度的同時擁有很高的歸回精度。我們的方法在Waymo Open Motion Dataset上達到了SOTA的水平。我們認為正負樣本匹配策略具有很高的研究價值,不僅僅是在軌跡預測任務上,在端到端軌跡規劃、智能體行為仿真等任務上也具備廣泛的應用潛力和重要的研究意義。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 模型
    +關注

    關注

    1

    文章

    3444

    瀏覽量

    49685
  • 混合模型
    +關注

    關注

    0

    文章

    6

    瀏覽量

    6487
  • 自動駕駛
    +關注

    關注

    788

    文章

    14075

    瀏覽量

    168424

原文標題:開發者說 | EDA:采用可更新且具區分度錨點的多模態運動預測

文章出處:【微信號:horizonrobotics,微信公眾號:地平線HorizonRobotics】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    基于模態語義SLAM框架

    本文提出了一個魯棒快速的模態語義 SLAM 框架,旨在解決復雜和動態環境中的 SLAM 問題。具體來說,將僅幾何聚類和視覺語義信息相結合,以減少由于小尺度對象、遮擋和運動模糊導致的
    的頭像 發表于 08-31 09:39 ?1934次閱讀

    HT for Web (Hightopo) 使用心得(3)- 吸附與

    吸附,顧名思義,是一個節點吸附到另一個節點上。就像船底的貝類一樣,通過吸附到船身,在船移動的時候自己也會跟著移動;而,則決定了哪個位置是該節點的坐標點位置。這里繼續以船舶為例,
    的頭像 發表于 10-12 10:44 ?1170次閱讀
    HT for Web (Hightopo) 使用心得(3)- 吸附與<b class='flag-5'>錨</b><b class='flag-5'>點</b>

    【「身智能機器人系統」閱讀體驗】2.身智能機器人大模型

    近年來,人工智能領域的大模型技術在多個方向上取得了突破性的進展,特別是在機器人控制領域展現出了巨大的潛力。在“身智能機器人大模型”部分,作者研究并探討了大模型如何提升機器人的能力,大模型存在
    發表于 12-29 23:04

    體驗MiniCPM-V 2.6 模態能力

    模態組網
    jf_23871869
    發布于 :2025年01月20日 13:40:48

    桿與圍巖加載過程紅外特征研究

    【作者】:籍遠明;【來源】:《光譜學與光譜分析》2010年03期【摘要】:應用紅外熱像技術,對桿與圍巖加載變化破壞過程中的紅外輻射現象進行了實驗研究,結果表明:應力峰值前,隨著荷載的增加,紅外輻射
    發表于 04-22 11:33

    5G傳輸創新方案分析及研究

    的分析及研究,并在廣深5G實驗網時進行實驗,點在保持傳輸網絡穩定、節省傳輸及機房投資、減少建設阻力、節省運營成本等有著明顯的效果,主要評估如下:  (1)TCO效果明顯。采用
    發表于 12-03 15:04

    動態可更新分布式監測系統設計

    提出了一個動態可更新的分布式監測系統DDMS的設計思想*并實現了適用于WINDOWS平臺的版本DDMS采用了AGENT模型*以探針獨立化和監測過程服務化為基礎*通過動態更新協議實現了系統.探針和
    發表于 06-28 18:03 ?14次下載
    動態<b class='flag-5'>可更新</b>分布式監測系統設計

    文化場景下的模態情感識別

    學習的特征,并通過多模態融合方法結合不同的模態。比較不同單模態特征和模態特征融合的情感識別性能.我們在CHEAVD中文
    發表于 12-18 14:47 ?0次下載

    預應力連接器的知識

    預應力應考慮等級分類張拉、補張拉和釋放壓力預應力的規定。鋼筋錨固好幾根預應力筋的預應力,除需有整束張拉的特性外,尚宜具備單條張拉的概率。
    發表于 08-13 11:10 ?6391次閱讀

    研發全新模態感知AI框架 AI能同時模擬人眼和手預測物體運動

    據外媒VentureBeat報道,來自三星、麥吉爾大學和約克大學的研究人員,近日研發出一個全新的生成式模態感知AI框架,能夠根據物體初始狀態的視覺和觸覺數據,來預測出物體的
    的頭像 發表于 02-12 09:12 ?3291次閱讀
    研發全新<b class='flag-5'>多</b><b class='flag-5'>模態</b>感知AI框架 AI能同時模擬人眼和手<b class='flag-5'>預測</b>物體<b class='flag-5'>運動</b>

    基于類間區分度的屬性約簡方法及其研究

    近似集的變化,卻忽略了不具有等價關系的對象所在的不同類簇間關系的變化情況。因此,引入了類間區分度的概念,相較于等價類和上下近似集而言,它可以反映類簇區分程度隨屬性變化而變化的情況。對類間重合度和類間區分度
    發表于 05-25 16:50 ?2次下載

    如何利用LLM做模態任務?

    大型語言模型LLM(Large Language Model)具有很強的通用知識理解以及較強的邏輯推理能力,但其只能處理文本數據。雖然已經發布的GPT4備圖片理解能力,但目前還未開放模態輸入接口并且不會透露任何模型上技術細節
    的頭像 發表于 05-11 17:09 ?1042次閱讀
    如何利用LLM做<b class='flag-5'>多</b><b class='flag-5'>模態</b>任務?

    更強更通用:智源「悟道3.0」Emu模態大模型開源,在模態序列中「補全一切」

    當前學界和工業界都對模態大模型研究熱情高漲。去年,谷歌的 Deepmind 發布了模態視覺語言模型 Flamingo ,它使用單一視覺語
    的頭像 發表于 07-16 20:45 ?835次閱讀
    更強更通用:智源「悟道3.0」Emu<b class='flag-5'>多</b><b class='flag-5'>模態</b>大模型開源,在<b class='flag-5'>多</b><b class='flag-5'>模態</b>序列中「補全一切」

    基于模態學習的虛假新聞檢測研究

    目前,單流架構模型在視頻分類、情感分析、圖像生成等模態領域中得以廣泛應用,單流模型具有結構簡單、容易實現、高準確率等優勢,在虛假新聞檢測領域中,是一個極具潛力的研究方向。
    的頭像 發表于 09-11 16:26 ?2935次閱讀
    基于<b class='flag-5'>多</b><b class='flag-5'>模態</b>學習的虛假新聞檢測<b class='flag-5'>研究</b>

    人工智能領域模態的概念和應用場景

    隨著人工智能技術的不斷發展,模態成為了一個備受關注的研究方向。模態技術旨在將不同類型的數據和信息進行融合,以實現更加準確、高效的人工智能
    的頭像 發表于 12-15 14:28 ?1.1w次閱讀
    主站蜘蛛池模板: 俄罗斯欧美色黄激情 | 日韩一级在线 | 欧美日本视频一区 | 天天躁狠狠躁夜夜躁2021 | sss在线play | 亚洲精品成人a | 奇米影视一区二区三区 | 免费伦费一区二区三区四区 | 四虎影院中文字幕 | 午夜爱爱网站 | 天堂在线中文网 | 国外免费精品视频在线观看 | 夜色321看片资源站 夜色sese | 国产色在线 | 亚洲 国产色综合天天综合网 | 成年人一级片 | 无遮挡一级毛片 | 在线看片你懂得 | 婷婷月| 天天综合网天天综合色 | 你懂的在线视频网站 | 狠狠色狠狠色综合久久一 | 美女黄18以下禁止观看的网站 | 亚洲一区亚洲二区 | 女bbbbxxxx毛片视频0 | 夜夜爱夜夜爽夜夜做夜夜欢 | 狠狠色综合色综合网络 | 国产成人乱码一区二区三区 | 手机看片久久青草福利盒子 | 免费大秀视频在线播放 | 久久国产精品99精品国产987 | 天天干天天干天天 | 午夜寂寞影院视频观看 | 精品久久久久国产免费 | 天天舔天天射天天干 | va在线观看 | 久久久久久久网站 | 亚洲综合激情另类专区 | 日本不卡在线播放 | 国产伦精品一区二区三区 | 午夜免费影院 | 窝窝午夜看片免费视频 |