2023年，Apple Vision Pro的橫空出世讓人們領略到了3D交互的魅力，商湯絕影通過深厚的技術研發實力和高效的創新迭代效率，帶來兩大全新座艙3D交互：3D Gaze高精視線交互和3D動態手勢交互。

作為全球首創的能夠通過視線定位與屏幕圖標進行交互的智能座艙技術，商湯絕影的3D Gaze高精視線交互將讓用戶通過眼神控制中控圖標。3D 動態手勢交互是行業領先的支持動態手勢和手部微動作識別的智能座艙技術，能讓用戶通過手勢“隔空”進行各類座艙交互。

商湯絕影這兩個全新的座艙交互功能相互配合，將給智能座艙的交互帶來革命性變革。

3D Gaze高精視線交互：“目控一切，所見即所選”

實體物理按鍵交互已經無法滿足人們對更便捷、更高效交互的需求，采用“非接觸式”交互已經成為智能座艙交互革命的必然趨勢，而視線交互是最為直接和便捷的方案之一。

行業目前普遍能做到的是視線檢測功能。現在車輛普遍搭載的駕駛員監測系統(DMS)就是以視線檢測技術為基礎。視線檢測功能作為商湯絕影領先行業的王牌產品，已成功解決了智能座艙場景下的一系列長尾問題，如遮擋、陰陽臉、墨鏡等，并量產落地100多個車型。

但DMS通常只能做到分心監測等艙內大面積區域的識別，受困于精度很難通過它進行具體的交互動作。商湯絕影全球首創3D Gaze高精視線交互，通過提升視線的精度，能精準識別到駕駛員注視中控屏或者后排用戶看向后排屏幕的具體的某個圖標并進行交互，實現“所見即所選”。

(商湯絕影全球首創3D Gaze高精視線交互，實現“所見即所選”)

因為眼球并不是標準的幾何球體，它是一個復雜的器官，包括角膜、虹膜、瞳孔、晶狀體、玻璃體等多個結構，不能簡單使用幾何球體的組合來描述眼球模型，而且每個人的眼球形態、大小、角膜曲率都存在生理上的差異，所以商湯絕影開發出了一套“千人千眼”的高精度三維眼球模型。

商湯絕影使用先進的眼動追蹤技術和高精度的眼部成像設備，收集并分析駕駛員的眼部數據，精準為每個人的定制個性化的眼球模型，從而提高視線交互的精度和準確性，進一步提升駕駛的安全性和舒適性。

以“千人千眼”的高精度三維眼球模型為基礎，結合創新的亞像素級細節定位和信息融合技術，商湯絕影3D Gaze高精視線交互革命性突破了座艙場景下的視線精度難題，配合手勢、語音甚至是眨眼等方式，將給用戶帶來更智能、更個性化的艙內視覺交互體驗。

3D動態手勢交互：“掌握一切，所選即所得”

3D手勢交互是以超高精的三維手部重建為基礎，實時捕捉、識別與分析用戶的三維手勢動作，實現對車輛功能控制的技術，商湯絕影在北京車展首發座艙內3D手勢交互，帶來高精度、高穩定性、快速響應的全新交互體驗。

相對于2D手勢識別，得益于三維空間定位，商湯絕影的3D手勢交互能更加精確定位手部的移動位置，并對手指細節進行優化，保證了不同手指間相互作用的準確感知，進而可以識別如捏合、拖拽等復雜動作，實現鼠標級的隔空手勢交互操作。

(商湯絕影3D手勢交互，實現“所選即所得”)

為了打造能夠識別動態手勢和手部微動作的3D手勢交互，商湯絕影構建了超百萬級別的數據規模。

在大量采集真人真實數據的基礎上，借助渲染算法，對真實采集中缺少的數據維度以及各種極端場景進行渲染補充，確保數據囊括車艙環境下幾乎所有場景。以海量的三維數據為基礎，商湯絕影實現了技術從2D到3D的迅速突破，為3D手勢交互打下堅強基礎。

同時，由于手部動作的靈活性與多樣性，3D手勢定位與識別往往存在自遮擋、遮擋、動態模糊、運動過快等問題。商湯絕影引入了基于大模型的端到端識別網絡。相較于傳統的人為規則邏輯，端到端神經網絡完全依靠海量數據學習到的知識對感知到的手部動作和手指細節進行判斷，帶來座艙3D手勢交互的全新模式。

通過3D手勢操作，用戶可以更加直接地通過隔空手勢控制導航、音樂、空調等功能，做到“所選即所得”，從而解放身體姿勢和雙手，享受更加舒適和智能化的駕駛體驗。

Apple Vision Pro的操作方式就是將3D高精視線交互與3D手勢交互相結合，讓用戶體驗到頭戴式MR設備的3D交互魅力。3D Gaze 高精視線交互與3D動態手勢交互相結合，將進一步變革艙內交互模式。

商湯絕影已經實現這兩大艙內3D交互功能相互配合，如同Vision Pro“裸眼上車”，革命性改變了座艙交互的方式，讓用戶從傳統的物理按鍵和屏幕觸控方式中解脫出來，真正做到“所見即所選，所選即所得”，打造更符合人類直覺的自然交互體驗。

返回第一電動網首頁 >