在過去的二十年中,移動計算技術的迅猛發展使智能手機嶄露頭角,成為主流的移動智能終端。雖然科技不斷進步,智能手機所面臨的可視空間受限、交互單一等局限問題仍待突破。隨著傳感器技術的提升、空間感知技術和虛擬現實增強技術的演進,“空間計算技術”應運而生,這為下一代移動平臺,特別是XR智能終端的發展帶來新的前景。
虹軟科技從標定、感知、交互和視覺呈現等方向全方位創新,構建了一套完整的空間計算技術,為下一代移動平臺,尤其是XR智能終端在空間感知、視覺呈現、人機交互以及數字內容方面的發展提供強有力的支持。
虹軟空間感知技術:
構建虛擬與現實協同融合的關鍵引擎
感知用戶所處空間是實現虛擬世界與真實環境融合的基礎和必要條件。虹軟空間計算技術涵蓋了多重空間感知解決方案,包括一站式多傳感器標定解決方案、頭顯6DoF跟蹤、平面檢測、稠密重建、語義分析、深度估計、實時3D Mesh重建、vSlam空間定位與地圖構建等。這一系列解決方案可為XR設備提供高效的環境感知能力,使虛擬元素與現實世界實現完美交融。
虹軟一站式多傳感器標定:在XR領域中,多個傳感器之間準確、高精度的協同工作離不開復雜的標定過程。基于此,虹軟提供業界全面覆蓋且性能領先的一站式多傳感器標定解決方案,解決多傳感器數據協同的難題。高效的標定算法可以快速準確地調整各傳感器的參數,使它們在實際運行中協同工作,為XR設備提供準確、穩定的感知數據。
虹軟頭顯 6DoF跟蹤:用戶頭部姿態跟蹤是頭戴式顯示設備的核心功能之一,虹軟的頭顯6DoF跟蹤解決方案通過整合多傳感器信息,實時跟蹤用戶頭部六自由度運動,包括旋轉和平移的自由度,使用戶體驗更為真實、自然,為用戶帶來更高的沉浸感。
多維度空間感知:通過平面檢測、稠密重建、語義分析、深度估計、實時 3D Mesh 重建、vSlam空間定位與地圖構建等多重技術,虹軟的空間感知技術實現了多維度的空間感知能力。vSlam空間定位與地圖構建通過實時處理攝像頭捕捉的視頻流,識別并跟蹤設備在現實世界中的位置,同時構建一個精確的環境地圖。實時 3D Mesh 重建則通過一系列的圖像或傳感器數據,實時生成用戶周圍環境的三維網格表示。這使得XR設備能夠更加準確地感知并重建用戶所處空間的實時三維模型,為虛擬元素提供了精準的定位和更逼真的交互體驗。這些技術的協同工作,確保了虛擬元素與現實世界的無縫銜接,提升了整體XR體驗的真實感和沉浸感。
虹軟交互技術:全面的互動引擎
虹軟空間計算技術中的交互技術涵蓋了手柄 6DoF 跟蹤、裸手 3D 手勢交互、視線跟蹤以及虛擬數字人表情驅動、人體驅動等多項交互解決方案,為XR提供了全新的人機交互模式。與過去在平面屏幕上的模擬3D不同,這種交互模式將用戶置身于真實的3D空間中,感受到沉浸式人機交互體驗。
手眼協同的沉浸式交互:虹軟基于裸手 3D 手勢與視線跟蹤技術,構建了一種創新的手眼協同的沉浸式交互解決方案。這一方案為用戶提供了僅依靠XR設備的傳感器(如ToF、多mono、多RGB)而不依賴其他物理設備的自由操控方法, 通過手勢和視線的完美配合,即可完成各種復雜交互任務。例如,用戶可以通過注視感興趣的內容,然后通過簡單的自然手勢動作完成選擇、拖動或放大縮小等操作。這種手眼協同的設計讓用戶更加自然地融入虛擬場景,為XR的交互帶來了更為綜合、靈活的操控體驗。
手柄 6DoF 跟蹤: 虹軟的手柄 6DoF 跟蹤技術通過實時捕捉手柄六個自由度的運動,即旋轉和平移,為用戶提供更為自由和精準的虛擬操控體驗。這一技術不僅提供了強大的工具支持,更為用戶創造了更為深度和靈活的虛擬交互環境,顯著提升用戶在XR中的沉浸感。
虛擬數字人表情驅動、人體驅動:通過捕捉用戶的面部表情和身體動作,虹軟的交互技術實現了更為生動、自然的虛擬數字人交互解決方案。這一解決方案不僅賦予用戶更豐富的表達能力,同時增強了虛擬體驗與真實生活的連接,提供了更為深刻和真實的用戶參與感。
虹軟視覺呈現技術:完美的畫面顯示
視覺呈現是決定用戶體驗的關鍵因素之一。畫面的流暢性與舒適性一直是XR領域用戶體驗的核心,虹軟空間感知技術通過提供視頻透視(VST: Video See-Through)、異步時間扭曲等先進的視覺呈現解決方案,為XR終端提供完善的視覺顯示。
視頻透視(VST: Video See-Through):虹軟的視頻透視技術通過智能調整視頻內容的投影方式,使其與用戶在虛擬空間中的位置和方向相匹配。視頻透視解決方案可以使虛擬元素更加真實地嵌入到用戶的視野中,增強虛擬與現實的交融感。
異步時間扭曲:異步時間扭曲解決方案主要是實現對每個眼睛的圖像進行獨立渲染和扭曲,以適應用戶頭部在虛擬環境中的運動。虹軟異步時間扭曲解決方案不僅提高了虛擬現實體驗的流暢性,同時避免了因頭部運動而引起的暈眩感,為用戶創造了更加舒適、真實的虛擬感知。
虹軟數字內容生成技術:
XR內容新生產力
數字內容生成技術正在成為XR內容創造新的生產力,虹軟空間計算技術包含了數字人創建、3D視頻成像、AIGC內容生成等豐富的數字內容生成技術,可為XR提供更為豐富、引人入勝的內容體驗。
虹軟AI數字人創建:借助虹軟先進的3D建模技術,虹軟的數字人創建解決方案可創作出從外貌、表情、動作等多個維度均與現實世界相仿的數字人物。數字人創建再結合虹軟數字人動畫驅動技術還可以準確捕捉和模擬人類面部表情、身體動作和語音特征,創造出媲美真人的虛擬角色。這使得在XR場景中呈現出更加生動、具有情感共鳴的數字人成為可能。
3D視頻成像:虹軟的3D視頻成像解決方案可將用戶通過普通雙攝/多攝像頭智能手機拍攝的內容以3D全景的方式呈現,為用戶提供更為沉浸式的體驗。這項技術能夠捕捉真實世界場景的立體信息,使用戶感覺置身其中。
AIGC內容生成:AIGC技術是虹軟在數字內容生成方面的重要創新,通過積極布局視覺大模型+XR相關技術,虹軟利用ArcMuse技術引擎產生圖片、視頻、數字人以及3D內容等,為XR眼鏡載體提供便捷、優質的內容生成引擎。這種內容生成方式不僅為內容創造提高了效率,同時也為創作者帶來更多創作靈感,推動XR內容創作的創新力。
通過這些創新技術,虹軟空間計算技術將不斷推動XR領域的發展,為用戶帶來更真實、更豐富的虛擬體驗。作為科技和創新的引領者,虹軟將繼續探索,不斷拓展空間計算技術邊界,為未來的XR智能終端開辟更加廣闊的可能性。
審核編輯:湯梓紅
-
傳感器
+關注
關注
2553文章
51467瀏覽量
756953 -
智能終端
+關注
關注
6文章
895瀏覽量
34899 -
虹軟
+關注
關注
1文章
54瀏覽量
4528
原文標題:引領XR革新:虹軟空間計算技術驅動新一代空間計算平臺
文章出處:【微信號:ArcSoft_World_Wide,微信公眾號:虹軟】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
相關推薦
軟銀與Quantinuum攜手,共推量子計算實際應用
全球計算聯盟(GCC)與OEHI開啟戰略合作,推動計算技術發展
使用NVIDIA Omniverse空間流式傳輸在XR中體驗數字孿生
![使用NVIDIA Omniverse<b class='flag-5'>空間</b>流式傳輸在<b class='flag-5'>XR</b>中體驗數字孿生](https://file1.elecfans.com/web3/M00/05/E7/wKgZPGeF_4eAGXMfAAAnqjMM1Rg974.png)
東軟集團軟件技術推動新質生產力發展
谷歌母公司Alphabet股價望高位收官,量子計算技術突破助漲
虹軟ArcMuse計算技術引擎全面升級
云計算技術的未來發展趨勢
韓國云計算技術怎么樣
知存科技邀您參與第二屆全國先進計算技術創新大賽
![知存科技邀您參與第二屆全國先進<b class='flag-5'>計算技術</b>創新大賽](https://file1.elecfans.com/web2/M00/00/CE/wKgZomax5XaAcpXFAAA5qp95M7I714.png)
存內計算技術工具鏈——量化篇
![存內<b class='flag-5'>計算技術</b>工具鏈——量化篇](https://file1.elecfans.com/web2/M00/E5/D3/wKgZomZEmdiAIdAqABnBLeia9y8361.png)
評論