交通運(yùn)輸領(lǐng)先企業(yè)率先采用 Cosmos 平臺(tái)。

支撐自動(dòng)駕駛汽車開(kāi)發(fā)有三個(gè)關(guān)鍵計(jì)算平臺(tái)：NVIDIA DGX 平臺(tái)用于在數(shù)據(jù)中心訓(xùn)練基于 AI 的堆棧；運(yùn)行在NVIDIA OVX 平臺(tái)上的NVIDIA Omniverse 平臺(tái)，用于仿真和合成數(shù)據(jù)的生成；以及車載計(jì)算平臺(tái)NVIDIAAGX，用于處理實(shí)時(shí)傳感器數(shù)據(jù)以實(shí)現(xiàn)安全駕駛。

這三個(gè)專為特定用途打造的全棧平臺(tái)，共同實(shí)現(xiàn)軟件開(kāi)發(fā)的持續(xù)改進(jìn)，加速性能及安全性的提升。

NVIDIA 在 CES 發(fā)布了NVIDIA Cosmos。Cosmos 由先進(jìn)的生成式世界基礎(chǔ)模型（WFMs）、高級(jí) tokenizer、護(hù)欄以及加速視頻處理管線組成，旨在推動(dòng)自動(dòng)駕駛汽車和機(jī)器人等物理 AI 系統(tǒng)的發(fā)展。

隨著 Cosmos 加入到三個(gè)計(jì)算平臺(tái)方案中，開(kāi)發(fā)者將獲得一個(gè)數(shù)據(jù)飛輪，它能將數(shù)千英里的人類駕駛里程轉(zhuǎn)化為數(shù)十億英里的虛擬駕駛里程，從而提升訓(xùn)練數(shù)據(jù)的質(zhì)量。

NVIDIA AI 研究副總裁 Sanja Fidler 表示：“自動(dòng)駕駛汽車數(shù)據(jù)工廠飛輪由車隊(duì)收集數(shù)據(jù)、精確的 4D 重建以及 AI 組成，可生成場(chǎng)景和交通變化，用于進(jìn)行訓(xùn)練和閉環(huán)評(píng)估。利用 NVIDIA Omniverse 平臺(tái)、Cosmos 以及配套的 AI 模型，開(kāi)發(fā)者能夠生成合成駕駛場(chǎng)景，將訓(xùn)練數(shù)據(jù)提升幾個(gè)數(shù)量級(jí)。”

NVIDIA 全球副總裁 Norm Marks 表示：“開(kāi)發(fā)物理 AI 模型通常需要大量資源并且成本高昂，開(kāi)發(fā)者需要獲取真實(shí)世界的數(shù)據(jù)集，并對(duì)其進(jìn)行篩選、整理和準(zhǔn)備，以便用于訓(xùn)練。Cosmos 通過(guò)生成式 AI 加速了這一過(guò)程，使自動(dòng)駕駛汽車和機(jī)器人領(lǐng)域的 AI 模型開(kāi)發(fā)變得更智能、更快速、更精確。”

交通運(yùn)輸領(lǐng)域的領(lǐng)先企業(yè)也在使用 Cosmos 構(gòu)建適用于自動(dòng)駕駛汽車的物理 AI。其中包括：

Waabi 是一家致力于開(kāi)發(fā)物理世界生成式 AI 的先驅(qū)。該公司將使用 Cosmos 搜索和整理用于自動(dòng)駕駛汽車軟件開(kāi)發(fā)和仿真的視頻數(shù)據(jù)。

Wayve 是一家致力于開(kāi)發(fā)自動(dòng)駕駛 AI 基礎(chǔ)模型的公司。該公司正在評(píng)估使用 Cosmos 搜索用于提高安全性和驗(yàn)證的極端駕駛場(chǎng)景。

自動(dòng)駕駛汽車工具鏈提供商 Foretellix 將使用 Cosmos 與 NVIDIA Omniverse Sensor RTX API 大規(guī)模評(píng)估和生成高保真測(cè)試場(chǎng)景與訓(xùn)練數(shù)據(jù)。

此外，共享出行巨頭 Uber 正在與 NVIDIA 合作，共同加速自主出行服務(wù)的發(fā)展。Uber 豐富的駕駛數(shù)據(jù)集在與 Cosmos 平臺(tái)和 NVIDIA DGX Cloud 的功能結(jié)合后，將幫助自動(dòng)駕駛汽車合作伙伴更加高效地構(gòu)建更強(qiáng)大的 AI 模型。

可用性

Cosmos 世界基礎(chǔ)模型現(xiàn)可在 Hugging Face 和 NVIDIA NGC 目錄上以開(kāi)放模型許可獲得，并且很快將以經(jīng)過(guò)全面優(yōu)化的 NVIDIA NIM 微服務(wù)推出。