在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

VLA,是完全自動駕駛的必經之路?

Hobby觀察 ? 來源:電子發燒友 ? 作者:梁浩斌 ? 2025-06-18 00:06 ? 次閱讀

電子發燒友網報道 (文/梁浩斌)最近,智駕領域又出現多個“新名詞”,比如蔚來推出的NWM、多家車企和智駕供應商都在宣傳的VLA。實際上,從各家的路線來看,隨著更大算力的芯片,比如小鵬、蔚來自研的智駕芯片,以及英偉達Thor的上車,越來越多的智駕方案選擇VLA的路徑。

那么本文就梳理一下當前智駕領域集中主流的大模型技術路線,以及各家廠商實現方式的區別和發展。

VLA和VLM

VLA即Vision-Language-Action,視覺-語言-動作模型。簡單來說,VLA是一種結合視覺感知、語言理解和動作決策的多模態AI模型。VLA通過統一空間智能、語言智能和行為智能,使自動駕駛系統能夠更全面地理解復雜環境并執行任務。

VLA的核心能力主要是三種,包括BEV、激光雷達等視覺輸入;理解自然語言指令或場景描述等語言處理能力;以及對車輛控制動作輸出的能力。最終通過這三種能力,實現從感知到決策的端到端閉環。

VLM即Vision-Language Model,視覺-語言模型,從名字上看,VLA就是在VLM的基礎上增加了動作的能力,事實也確實如此。

VLA在VLM核心的多模態推理和理解能力上,增加了動作生成的能力,將VLM的輸出,比如將“在這個路口要轉左”的指令輸出直接轉化為車輛的控制信號,包括油門、方向盤角度、剎車力度等。

一般來說,VLA通常也是基于預訓練的VLM基座模型,利用VLM具備的視覺和語言能力,引入動作預測模塊進行擴展,使其適應各種任務,包括機器人,自動駕駛等。

具體到自動駕駛的應用中,VLA可以直接調用VLM生成的語義理解結果,比如識別視頻畫面中的交通標志、場景描述等,結合實時感知數據來生成車輛的控制指令。同時,VLA的執行結果,也可以反向優化VLM的場景理解能力,優化決策選擇。

簡單總結下來,VLM是傾向于認知的一個模型,它通過自然語言來描述出當前車輛前方的場景,以及“看到”哪些內容,并能夠輸出一些車輛控制指令的文本;VLA是側重于動作控制,在獲得場景的自然語言信息后,解決車輛應該如何繼續行駛,比如作出避讓、變道等動作,并直接輸出油門、方向盤角度、剎車力度等具體的控制指令。

小鵬、理想、元戎落注VLA,但實現方式略有不同

目前小鵬、理想、元戎啟行等車企和智駕公司,都展示了其VLA的技術布局,并表示即將量產。

元戎啟行CEO周光在最近的2025年火山引擎Force原動力大會就宣布,將攜手火山引擎,基于豆包大模型,共同研發VLA等前瞻技術,元戎騎行VLA模型將在2025年第三季度推向消費者市場。

理想汽車此前則透露VLA模型將在今年三季度搭載于理想L9/L8改款車型。

小鵬汽車在最近小鵬G7發布會上表示,將行業首發本地端VLA+VLM大模型。小鵬在車端實現VLA的方式大致是,采用超大參數云端大模型,訓練出世界模型基座,再通過蒸餾的方式產出適配車端算力的小模型,最大限度地保留云端模型基座的核心能力。

今年4月,小鵬汽車對外宣布正在研發參數規模達到720億的云端大模型,即“小鵬世界基座模型”。該基座模型是以大語言模型為骨干網絡,使用海量優質駕駛數據訓練的VLA大模型(視覺-語言-行為大模型),具備視覺理解能力、鏈式推理能力(CoT)和動作生成能力。目前,小鵬汽車已經在后裝算力的車端上用小尺寸的基座模型實現了控車。在沒有任何規則代碼托底的情況下,新的“AI大腦”展現出令人驚喜的基礎駕車技能,能夠絲滑地加減速、變道繞行、轉彎掉頭、等待紅綠燈等等。

在上周的計算機視覺頂會CVPR 2025上,小鵬汽車也分享了其基礎模型的進展。小鵬世界基座模型負責人劉先明博士表示,小鵬汽車已經在云上訓練了10億、30億、70億、720億等多個參數的模型,并且持續向模型“投喂”更大規模的訓練數據。目前,小鵬世界基座模型累計“吃下”2000多萬條視頻片段(每條時長30秒)。

在這一過程中,研發團隊清晰地看到了規模法則(Scaling Law)的顯現。也就是說,模型的參數量越大、模型學習的數據越多,模型的性能越強。這是AI大模型浪潮以來,行業內首次明確驗證規模法則在自動駕駛VLA模型上持續生效。

理想汽車的VLA路線則略有不同,是先對基座模型進行蒸餾,產出車端的蒸餾模型,然后再進行強化學習,實現“司機Agent”。

蔚來世界模型NWM

蔚來近期推送了其最新的NWM首個版本,據蔚來的介紹,蔚來世界模型NWM是一個多元自回歸生成模型,具備空間認知和時間認知能力,能進行長時序決策與推演。蔚來世界模型 NWM同樣是多模態輸入輸出,輸入的多模態數據包含圖像、語言,輸出的多模態數據則包含圖像和行動。

所以NWM其實是包含了VLA的所有特征,但不同之處在于,NWM對于空間理解的能力,以及長時序的建模能力會更強。

蔚來用停車場自主尋路的功能來展示NWM的認知、理解與推理能力。例如,當車輛在行駛過程中看到“15-20號樓→”的標牌時,它就能理解18號樓應當向右轉;在上一個路口看到“出口直行”字樣,當前路口卻沒有標牌,車輛也能推理出出口應該繼續直行。

寫在最后

元戎啟行認為,VLA是通往完全自動駕駛的必經途徑。當前VLA確實已經成為智駕的主流發展方向,而VLA對于車端的算力需求,還將會帶動智駕芯片算力的需求爆發。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 自動駕駛
    +關注

    關注

    788

    文章

    14242

    瀏覽量

    169904
收藏 人收藏

    評論

    相關推薦
    熱點推薦

    NVIDIA Halos自動駕駛汽車安全系統發布

    NVIDIA 整合了從云端到車端的安全自動駕駛開發技術套件,涵蓋車輛架構到 AI 模型,包括芯片、軟件、工具和服務。 物理 AI 正在為自動駕駛和機器人開發技術的交叉領域釋放新的可能性,尤其是加速了
    的頭像 發表于 03-25 14:51 ?536次閱讀

    理想汽車推出全新自動駕駛架構

    2025年3月18日,理想汽車自動駕駛技術研發負責人賈鵬在NVIDIA GTC 2025發表主題演講《VLA:邁向自動駕駛物理智能體的關鍵一步》,分享了理想汽車對于下一代自動駕駛技術M
    的頭像 發表于 03-19 14:12 ?466次閱讀

    英偉達高管:完全自動駕駛汽車尚需時日

    英偉達汽車業務負責人阿里·卡尼近日表示,完全自動駕駛汽車的實現還遙遙無期,預計至少要到下一個十年才有可能問世。盡管未來的自動駕駛技術將會取得顯著進步,但卡尼強調,技術發展必須穩扎穩打,過度冒進可能會
    的頭像 發表于 01-23 11:27 ?487次閱讀

    英偉達:全自動駕駛汽車至少需十年

    自動駕駛技術迅猛發展的當下,英偉達作為該領域的重要參與者,卻對完全自動駕駛的實現時間表達了審慎態度。 據Carscoops報道,英偉達汽車業務負責人阿里·卡尼直言,完全自動駕駛汽車“至少要到下一個
    的頭像 發表于 01-23 11:08 ?523次閱讀

    電動工具EMC測試整改:邁向高質量生產的必經之路

    深圳南柯電子|電動工具EMC測試整改:邁向高質量生產的必經之路
    的頭像 發表于 01-14 14:29 ?452次閱讀
    電動工具EMC測試整改:邁向高質量生產的<b class='flag-5'>必經之路</b>

    特斯拉發布“完全自動駕駛”軟件最新版本FSDV13.2

    近日,特斯拉終于推出了備受期待的“完全自動駕駛”軟件最新版本——FSD V13.2。盡管此前曾承諾在感恩節之前發布,但特斯拉還是在11月份的最后時刻兌現了承諾,展現了其人工智能團隊的不懈努力和重要進展。
    的頭像 發表于 12-03 10:59 ?1083次閱讀

    自動駕駛汽車安全嗎?

    隨著未來汽車變得更加互聯,汽車逐漸變得更加依賴技術,并且逐漸變得更加自動化——最終實現自動駕駛,了解自動駕駛汽車的安全問題變得非常重要,這樣你才能回答“自動駕駛汽車安全嗎”和“
    的頭像 發表于 10-29 13:42 ?1012次閱讀
    <b class='flag-5'>自動駕駛</b>汽車安全嗎?

    智能駕駛自動駕駛的關系

    智能駕駛自動駕駛在概念上存在一定的聯系和區別,以下是對兩者關系的介紹: 一、概念定義 智能駕駛 : 智能駕駛是一個更為寬泛的概念,它指的是通過機器輔助人類進行
    的頭像 發表于 10-23 16:02 ?1428次閱讀

    自動駕駛HiL測試方案案例分析--ADS HiL測試系統#ADAS #自動駕駛 #VTHiL

    自動駕駛
    北匯信息POLELINK
    發布于 :2024年10月22日 15:20:19

    自動駕駛HiL測試方案介紹#ADAS #自動駕駛 #VTHiL

    自動駕駛
    北匯信息POLELINK
    發布于 :2024年10月12日 18:02:07

    通用汽車旗下Cruise據悉計劃年內恢復完全自動駕駛服務

    通用汽車旗下的無人駕駛部門Cruise正加速推進其業務恢復計劃,據知情人士透露,該部門目標在今年晚些時候恢復運行完全自動駕駛的乘車服務,并計劃在2025年初正式對此服務進行收費。這一消息為自動駕駛行業帶來了新的期待。
    的頭像 發表于 07-29 17:53 ?944次閱讀

    FPGA在自動駕駛領域有哪些優勢?

    FPGA(Field-Programmable Gate Array,現場可編程門陣列)在自動駕駛領域具有顯著的優勢,這些優勢使得FPGA成為自動駕駛技術中不可或缺的一部分。以下是FPGA在自動駕駛
    發表于 07-29 17:11

    FPGA在自動駕駛領域有哪些應用?

    FPGA(Field-Programmable Gate Array,現場可編程門陣列)在自動駕駛領域具有廣泛的應用,其高性能、可配置性、低功耗和低延遲等特點為自動駕駛的實現提供了強有力的支持。以下
    發表于 07-29 17:09

    Mobileye引領自動駕駛新紀元:L4級無人駕駛系統在德國成功路測

    在全球自動駕駛技術的浪潮中,Mobileye,作為全球自動駕駛解決方案的領軍者,再次邁出了具有里程碑意義的一步。近日,該公司宣布其全自動無人駕駛系統(即L4級
    的頭像 發表于 07-02 17:04 ?1890次閱讀
    主站蜘蛛池模板: 毛片福利 | 亚洲综合情 | 伊人久久大香线蕉影院95 | 免费人成在线观看网站品爱网 | 久久久久国产精品免费网站 | 亚洲色图欧美在线 | 亚洲五月综合缴情婷婷 | 特别黄的免费视频大片 | 免费一级毛毛片 | 亚洲一区免费在线观看 | 国产性videosgratis | 久久久久国产精品免费网站 | 黄色午夜视频 | 黄 色 免费网 站 成 人 | 色费女人18女人毛片免费视频 | 一级片免费看 | 国产美女精品三级在线观看 | 亚洲人成网站999久久久综合 | 新版天堂中文网 | 国产亚洲人成网站天堂岛 | 美女视频黄.免费网址 | 精品久久成人 | 黄网站色视频免费观看 | 开心激情播播网 | 天天爽夜夜爽每晚高澡 | 久久夜色精品国产飘飘 | 午夜视频在线免费观看 | 影音先锋 色天使 | 国产高清在线精品一区 | 黄视频免费 | 国产女主播在线播放一区二区 | 99r8这里精品热视频免费看 | 好大好硬好深好爽的视频 | 国产一区二区三区四卡 | 日韩免费网站 | 91大神视频网站 | 日本理论片www视频 日本理论午夜中文字幕第一页 | 夜天干天干啦天干天天爽 | 欧美三级大片在线观看 | 日韩特黄毛片 | 国产va免费精品观看 |