對于VR/AR設備來說,顯示技術和內容生態可能是最為重要的兩個元素,但同樣不可忽視的還有設備中集成的一系列傳感器。這些傳感器的存在是設備交互的關鍵,而VR/AR的本質其實就是人機交互的創新,沒有了這些傳感器,這些虛擬現實與尋常的顯示設備并無二致,毫無創新性可言。那么如今的VR/AR設備中,有哪些傳感器正在頻繁露面呢?我們不妨以在游戲VR設備上玩轉市場的索尼為例。
圖像傳感器
索尼在前不久發布了PSVR2,并聲稱支持了注視點渲染技術。這種渲染技術專注于渲染人注視點范圍內的場景,通過降低周邊視覺的成像質量來降低設備負載。畢竟VR/AR設備說到底還是移動設備,其功耗和性能都相對有限,但在這樣的定位下,VR/AR往往需要更高的幀數。況且與人眼一樣,我們其實無需對視覺死角內的場景付出過多關注,所以注視點渲染技術減輕GPU負擔的方案正在席卷整個業界。
那么這一技術是如何實現的呢?答案就是眼動追蹤。眼動追蹤有多種實現手段,但對于VR/AR設備來說,該技術主要利用光源對眼鏡進行照射來產生反射,并使用圖像傳感器來采集光源在角膜和瞳孔上的反射,從而通過角度等參數來計算眼動的向量,最終判斷人的視線方向。
Tobii Eye Tracker 5 / Tobii
比如Tobii的眼動儀就采用了近紅外光源,并利用兩個圖像傳感器、先進的圖像處理算法和三維眼球模型來計算眼睛和視線的位置。而索尼的PSVR2也配備了兩個紅外攝像頭,分別完成兩個眼睛的眼動追蹤,另有四個攝像頭來完成控制器與頭顯的跟蹤。
眼動追蹤不僅可以用于注視點渲染,也為VR/AR創造了另一重數據輸入,這對于游戲或者視頻內容的創作者來說,也就多了一重交互方式,方便他們用眼動數據來創造面部表情追蹤、注視反饋和視線鎖定目標等功能。
運動傳感器
為了進一步提升沉浸感,VR/AR設備中往往還加入了陀螺儀、磁力計和加速度計等運動傳感器,陀螺儀主要用于確定角度和姿勢輸入,而磁力計主要用磁場強度等參數來定位設備位置,而加速度計則顧名思義用來測量加速度。這些傳感器不僅分布在頭戴設備上,也集成在了控制器上。
運動傳感器完成姿勢識別 / 索尼
索尼在去年底公開了一份專利,其中就提到了如何用這些運動傳感器來完成人體姿勢的識別匹配。索尼稱目前許多定位方案需要攝像頭或激光之類的視覺追蹤,所以除了頭戴設備和控制器上的傳感器以外,還需要在使用區域內部署額外的距離傳感器,且中間不能存在障礙物。
PSVR2 Sense控制器 / 索尼
而索尼的這項專利減少了追蹤設備的數量,僅使用頭顯和控制器上的運動傳感器就能重構真實的人體模型。該技術根據陀螺儀、磁力計和加速度計的數據來在數據庫中找到正確的匹配,最終確定姿勢和動作。不過從索尼的PSVR2和PSVR2 Sense控制器的規格來看,兩者仍然在采用三軸陀螺儀+三軸加速度計的六軸運動感知系統。
BMX160絕對方向傳感器 / 博世
當然了,目前更常見的是IMU和絕對方向傳感器這樣的高集成方案,比如博世的BMI270和BMX160。BMX絕對方向傳感器集成了一個3軸數字加速度計、16位數字陀螺儀和地磁傳感器,即便在三者同時運行時也只有1585μA的低功耗,非常適合作為AR/VR可穿戴設備的傳感器融合方案。
小結
傳感器其實本來就是針對特定工作而生的元件,如今在元宇宙概念為AR/VR煥發的第二春下,專為虛擬現實場景準備的傳感器也將迎來新一輪爆發式增長。考慮到還有蘋果、微軟和騰訊等大廠的入局,及時把握這一輪增長,AR/VR與傳感器廠商都能從中獲益。
圖像傳感器
索尼在前不久發布了PSVR2,并聲稱支持了注視點渲染技術。這種渲染技術專注于渲染人注視點范圍內的場景,通過降低周邊視覺的成像質量來降低設備負載。畢竟VR/AR設備說到底還是移動設備,其功耗和性能都相對有限,但在這樣的定位下,VR/AR往往需要更高的幀數。況且與人眼一樣,我們其實無需對視覺死角內的場景付出過多關注,所以注視點渲染技術減輕GPU負擔的方案正在席卷整個業界。
那么這一技術是如何實現的呢?答案就是眼動追蹤。眼動追蹤有多種實現手段,但對于VR/AR設備來說,該技術主要利用光源對眼鏡進行照射來產生反射,并使用圖像傳感器來采集光源在角膜和瞳孔上的反射,從而通過角度等參數來計算眼動的向量,最終判斷人的視線方向。
Tobii Eye Tracker 5 / Tobii
比如Tobii的眼動儀就采用了近紅外光源,并利用兩個圖像傳感器、先進的圖像處理算法和三維眼球模型來計算眼睛和視線的位置。而索尼的PSVR2也配備了兩個紅外攝像頭,分別完成兩個眼睛的眼動追蹤,另有四個攝像頭來完成控制器與頭顯的跟蹤。
眼動追蹤不僅可以用于注視點渲染,也為VR/AR創造了另一重數據輸入,這對于游戲或者視頻內容的創作者來說,也就多了一重交互方式,方便他們用眼動數據來創造面部表情追蹤、注視反饋和視線鎖定目標等功能。
運動傳感器
為了進一步提升沉浸感,VR/AR設備中往往還加入了陀螺儀、磁力計和加速度計等運動傳感器,陀螺儀主要用于確定角度和姿勢輸入,而磁力計主要用磁場強度等參數來定位設備位置,而加速度計則顧名思義用來測量加速度。這些傳感器不僅分布在頭戴設備上,也集成在了控制器上。
運動傳感器完成姿勢識別 / 索尼
索尼在去年底公開了一份專利,其中就提到了如何用這些運動傳感器來完成人體姿勢的識別匹配。索尼稱目前許多定位方案需要攝像頭或激光之類的視覺追蹤,所以除了頭戴設備和控制器上的傳感器以外,還需要在使用區域內部署額外的距離傳感器,且中間不能存在障礙物。
PSVR2 Sense控制器 / 索尼
而索尼的這項專利減少了追蹤設備的數量,僅使用頭顯和控制器上的運動傳感器就能重構真實的人體模型。該技術根據陀螺儀、磁力計和加速度計的數據來在數據庫中找到正確的匹配,最終確定姿勢和動作。不過從索尼的PSVR2和PSVR2 Sense控制器的規格來看,兩者仍然在采用三軸陀螺儀+三軸加速度計的六軸運動感知系統。
BMX160絕對方向傳感器 / 博世
當然了,目前更常見的是IMU和絕對方向傳感器這樣的高集成方案,比如博世的BMI270和BMX160。BMX絕對方向傳感器集成了一個3軸數字加速度計、16位數字陀螺儀和地磁傳感器,即便在三者同時運行時也只有1585μA的低功耗,非常適合作為AR/VR可穿戴設備的傳感器融合方案。
小結
傳感器其實本來就是針對特定工作而生的元件,如今在元宇宙概念為AR/VR煥發的第二春下,專為虛擬現實場景準備的傳感器也將迎來新一輪爆發式增長。考慮到還有蘋果、微軟和騰訊等大廠的入局,及時把握這一輪增長,AR/VR與傳感器廠商都能從中獲益。
聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。
舉報投訴
-
傳感器
+關注
關注
2551文章
51147瀏覽量
753998 -
vr
+關注
關注
34文章
9640瀏覽量
150326
發布評論請先 登錄
相關推薦
杭晶電子:晶振在AR/VR中的應用
芯片提供精準的時鐘信號,支持高速圖像渲染和刷新率,減少延遲和畫面撕裂現象。 2、支持高刷新率(如90Hz、120Hz)和低延遲,提升用戶體驗。 02、定位與跟蹤系統 在AR/VR中的運動跟蹤設備(如IMU傳感器)中,晶振提供高精
XR與AR和VR的區別是什么
XR(Extended Reality,擴展現實)是一種將現實世界與虛擬世界相結合的技術,它包括了AR(Augmented Reality,增強現實)和VR(Virtual Reality,虛擬現實
增強現實技術(AR)和虛擬現實技術(VR)的區別?
攝像頭、傳感器等設備捕捉現實世界的信息,然后將其與計算機生成的虛擬信息相結合,從而為用戶提供一種增強的現實體驗。AR技術可以應用于各種領域,如游戲、教育、醫療、旅游等。 虛擬現實技術(VR)是一種通過計算機生成的三維環境,使用戶
解鎖未來,無線姿態傳感器如何革新動作捕捉與VR體驗
隨著科技的飛速發展,動作捕捉和虛擬現實(VR)技術成為我們生活中的一部分,它們為我們帶來了前所未有的沉浸式體驗。而在這個變革之中,無線傳感器憑借其獨特的優勢,推動這一技術革新的關鍵力量。 無線
用于水利工程系統方面的傳感器M-A542VR10
水利工程技術的不斷進步,傳感器在工程監測和管理中的應用變得越來越重要。愛普生M-A542VR10傳感器憑借其卓越的性能和高可靠性,成為了水利工程領域的理想選擇。它
AR2020CSSC13SMTAH3-GEVB傳感器板數據手冊
電子發燒友網站提供《AR2020CSSC13SMTAH3-GEVB傳感器板數據手冊.rar》資料免費下載
發表于 05-06 17:37
?0次下載
AR0234CSSC00SUKAH3-GEVB傳感器板數據手冊
電子發燒友網站提供《AR0234CSSC00SUKAH3-GEVB傳感器板數據手冊.rar》資料免費下載
發表于 05-06 17:12
?0次下載
ar與vr的區別與聯系 ar和vr哪個更高級
AR(Augmented Reality,增強現實)和VR(Virtual Reality,虛擬現實)是現代科技領域中兩個頗受關注的概念,盡管它們都屬于虛擬現實的范疇,但是它們在技術的應用和功能方面
Sheba面向AR/VR/XR推出MEMS自動對焦緊湊型攝像頭
超低功耗傳感器位移(sensor-shift)自動對焦技術,為鏡頭設計提供了無與倫比的靈活性,能夠在不影響鏡頭品質的情況下獨特地適應大光圈光學元件,為消費類和企業級增強現實/虛擬現實/混合現實(AR/VR/XR)設備提供高質量成
評論