本周二，NVIDIA創始人兼首席執行官黃仁勛介紹了NVIDIA的多項新技術，這些技術有望為萬億美元的產業帶來改變。NVIDIA的多項新技術可助力各領域實現現實和虛擬世界模擬，包括自動駕駛、虛擬形象、機器人、以及地球氣候建模等領域。

黃仁勛在本周二的GTC線上大會發表了主題演講，帶來了NVIDIA Omniverse Avatar和NVIDIA Omniverse Replicator等多項最新發布和演示，并展示了用于3D工作流程的虛擬世界模擬和協作平臺 —— NVIDIA Omniverse，以及Omniverse是如何將NVIDIA的各項技術相結合。

他分享了使用Omniverse Avatar平臺的多個使用案例，包括用于客戶支持的Project Tokkio和用于視頻會議的Project Maxine。

黃仁勛表示：“如何使用Omniverse模擬倉庫、工廠、物理和生物系統、5G邊緣、機器人、自動駕駛汽車，甚至是虛擬形象的數字孿生，是一個永恒的主題。”

在主題演講的最后，他宣布NVIDIA將建立一個數字孿生來模擬和預測氣候變化。該數字孿生名為Earth Two，簡稱E-2。

全棧數據中心級開放式平臺

黃仁勛表示，加速計算推動了現代AI的發展，它掀起的浪潮正在涌向科學界和全球各行各業。而這一切都基于3類芯片 —— GPU、CPU、DPU，以及從云端到邊緣部署廣泛的多種系統 —— DGX、HGX、EGX、RTX和AGX系統。

從圖形、AI、數據科學到機器人，NVIDIA已經為300萬名開發者創建了150個加速庫。

在GTC上，NVIDIA還發布了65個全新以及更新的SDK。

黃仁勛表示：“NVIDIA加速計算是一個全棧數據中心級開放式平臺。”

在介紹NVIDIA Quantum-2時，黃仁勛將其稱為“到目前為止最先進的網絡平臺”，并且隨著BlueField-3 DPU的發布，全球將迎來云原生超級計算。Quantum-2 所提供的超高性能、廣泛的可訪問性、以及高安全性，正是云計算供應商和超級計算中心所需要的。

網絡安全是企業和國家的首要問題，黃仁勛發布了依托于三大支柱的零信任框架，以應對這一挑戰。

BlueField DPU將應用程序與基礎架構隔離。最新BlueField SDK——NVIDIA DOCA 1.2實現了新一代分布式防火墻。黃仁勛介紹道， NVIDIA Morpheus假設入侵者已進入其內部，會利用“加速計算和深度學習的超強力量來檢測入侵者的活動”。

Omniverse Avatar 和

Omniverse Replicator

黃仁勛表示，有了Omniverse，“我們就有了創建全新3D世界，或對物理世界進行建模的技術。”

NVIDIA還發布了Omniverse Avatar，致力于助力開發者使用Omniverse創建交互式角色，并使此角色具備視覺和語言能力，能夠就各類主題進行交談，并理解自然語言中的深層含義。

黃仁勛展示了Project Maxine如何利用Omniverse Avatar平臺將計算機視覺、Riva語音AI以及虛擬形象動畫和圖形連接到一個實時對話的AI機器人——“Toy Jensen Omniverse Avatar”上。

他還演示了Project Tokkio，這是一個位于自助式餐廳服務亭中的虛擬服務員，其可看到兩名顧客，與之交談并理解他們的對話。

黃仁勛還展示了Project Maxine為虛擬協作和內容創建應用添加先進視頻和音頻功能的能力。

一項演示中，一位女士在嘈雜的咖啡廳中用英語進行視頻通話，在去除背景噪音后可以清楚地聽到她所說的話。她的話被實時轉錄并翻譯成法語、德語和西班牙語，而且借助Omniverse，以上多門外語均出自虛擬形象之口，并且這位虛擬形象在對話時的聲音和語調與她本人完全相同。

為了幫助開發者創建訓練AI所需的海量數據，NVIDIA發布了Omniverse Replicator——一款用于訓練深度神經網絡的合成數據生成引擎。

NVIDIA開發了兩款Replicator合成數據生成引擎：面向通用機器人、用于Isaac Sim的Omniverse Replicator，以及面向自動駕駛汽車、用于DRIVE Sim的Omniverse Replicator。

自去年年底發布以來，Omniverse已被500家公司的設計師下載了7萬次。

AI 模型和系統

黃仁勛發布了用于訓練大型語言模型的Nemo Megatron。他表示，此模型 “將成為有史以來最大的主流HPC應用。”

圖形作為現代數據科學中的一種關鍵數據結構，現在可以通過全新Python軟件包Deep Graph Library（DGL）投射到深度神經網絡框架中。

今日發布的NVIDIA Modulus用于構建和訓練物理學機器學習模型，這些模型可以學習并充分遵守物理學法則。

Triton是一款適用于所有工作負載的推理服務器，其升級版現在可以推理森林模型，并執行大型語言模型的多GPU多節點推理。

黃仁勛共發布了三個新的庫：

ReOpt – 面向10萬億美元的物流行業

cuQuantum – 致力于加速量子計算研究

cuNumeric – 致力于為Python社區的科學家、數據科學家以及機器學習和AI研究者而加速NumPy。

黃仁勛還發布了NVIDIA Launchpad，以助力將基于NVIDIA AI技術的服務帶到邊緣。NVIDIA正在與數據中心巨頭Equinix合作，將NVIDIA AI預安裝并集成到全球的數據中心中。

機器人技術

NVIDIA Isaac生態系統現已有700多家公司和合作伙伴，這個數字在過去4年里增長了5倍。

黃仁勛宣布，NVIDIA Isaac機器人平臺現可輕松集成至機器人操作系統（ROS）中。這是一套應用廣泛的軟件庫和工具，適用于機器人應用。

黃仁勛解釋道，建立在Omniverse之上的Isaac Sim是有史以來最逼真的機器人模擬器。

“該模擬器的目標是讓機器人無法分清自己是在模擬環境中還是在現實世界中。” 為此，Isaac Sim Replicator可生成用于訓練機器人的合成數據。

黃仁勛表示，Replicator可以模擬傳感器，生成自動標記的數據，并通過一個域隨機化引擎，創建豐富、多樣化的訓練數據集。

自動駕駛汽車

黃仁勛表示，所有移動之物都將實現完全或近乎完全的自主化。“到2024年，絕大多數新電動車都將具備真正的自動駕駛功能。”

NVIDIA DRIVE是NVIDIA的自動駕駛汽車全棧開放式平臺，而Hyperion 8是NVIDIA最新的完整硬件和軟件架構。其傳感器套件包括12個攝像頭、9個雷達、12個超聲波和一個前置激光雷達，所有處理均通過兩個NVIDIA Orin 系統級芯片進行。

黃仁勛詳細介紹了Hyperion內置的幾項新技術，包括用于DRIVE Sim的Omniverse Replicator。Omniverse Replicator是一個基于Omniverse的自動駕駛汽車合成數據生成引擎。

NVIDIA目前正在運行Hyperion 8傳感器、4D感知、基于深度學習的多傳感器融合、特征追蹤和一個新的規劃引擎。

汽車內部也將被徹底改變。NVIDIA Maxine技術將重新定義我們與汽車的互動方式。

“Maxine將把您的汽車變成一位管家。”

Earth Two

黃仁勛最后宣布，NVIDIA將構建Earth Two （E-2）來模擬和預測氣候變化。“為了創建Earth Two，我們將需要使用迄今為止發明的所有技術。”

責任編輯：haq