在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

歡創科技發布基于視覺與慣性傳感定位技術的Camsense XR產品

牽手一起夢 ? 來源:VR陀螺 ? 作者:佚名 ? 2020-10-18 10:34 ? 次閱讀

10月16日,深圳市歡創科技有限公司(以下簡稱:歡創科技)發布了基于視覺與慣性傳感定位技術的VR手柄套件Camsense XR,能實現VR/AR單目視覺6DoF追蹤。據了解該公司在視覺領域深耕多年,套件定位效果絲毫不亞于Oculus等主流產品

“國內的Inside-out技術迭代,或許在一到兩年內都很難趕超Quest。”就在之前Quest2的發布會結束不久,陀螺君在和某從業者閑聊時得到了這樣的答案。

從頭控到如今的6DoF,VR硬件的迭代發展正推動著內容生態的急劇進化。基于視覺的Inside-out追蹤系統,為PC VR熱門游戲《Beat Saber》、《SuperHot VR》提供了移植的可能性,更是促使涌現出一大批具有極高辨識度和玩法創新的移動游戲佳作。

不得不說,在VR行業發展初期,底層技術的發展離不開Facebook、微軟、索尼等這些一眾大廠的重金推動。而作為現今移動VR游戲的標配,Inside-out追蹤系統也成為了大廠們底層技術生態中的最強盾牌。 在國內,基于視覺的Inside-out追蹤系統依舊處在萌芽期,各家廠商都在積極探索和落地與視覺搭配使用的,基于電磁和超聲波的其他追蹤方案,而算法層面的薄弱問題幾乎成為了阻礙國內Inside-out追蹤系統發展的最大攔路虎。

那么,國內有沒有一家企業對于Inside-out視覺追蹤算法有著更為深入的探索? 此次VR陀螺到場體驗了該產品,并采訪到歡創科技CEO周琨,了解到該產品背后的淵源與背景。

定位效果媲美Quest?Camsense XR實現單目視覺6DoF追蹤

雖然國內從事VR頭顯研發的企業層出不窮,但專注于6DoF手柄方案的企業卻鳳毛麟角。在手柄方案中,又可分為可見光、紅外、激光、電磁等不同方案的產品。每一種方案都有其不同的優缺點,如可見光對光線環境有要求,且攝像頭范圍外無法捕捉;激光方案需要避免反光鏡面;電磁易被金屬干擾等。

區別于以上所有定位方案,Camsense XR采用了視覺追蹤+慣性傳感方案,并且是極其少有的支持單目6DoF的追蹤方案。其主要應用于VR頭顯的手柄定位追蹤,結合頭部與手柄兩端實現精準定位,可適配不同的頭顯設備。

整套方案由搭載兩個攝像頭的視覺定位模組以及兩個6DoF手柄構成,由于該方案核心在于軟件算法所呈現出來的定位效果,所以手柄的工業設計可根據頭顯廠商進行定制,而攝像頭定位模組也可在頭顯設計時完全融入到產品中。

參數來看,Camsense XR可實現距離1米、水平170°&垂直98°的6DoF追蹤,定位精度動態條件下小于3mm,靜態條件下約1mm,運算延遲低于10ms。

從市場上主流的VR頭顯來看,Inside-out已經成為主流的追蹤方案,并且大多采用視覺定位追蹤。如果是純視覺定位的話,其缺點在于對于環境要求較高,并且當手柄移動到捕捉范圍外時非常容易丟失,所以需要靠算法進行補償。

而Camsense XR的優勢在于,視覺追蹤+慣性傳感兩者混合,當手柄位于攝像頭追蹤范圍外時,可通過慣性傳感進行補償,同時結合算法,實現穩定流暢的手柄追蹤效果。視覺追蹤技術與慣性傳感器一樣都已經在其他領域廣泛應用,具備較高的成熟度和穩定性。

VR陀螺在現場測試了該產品的性能和效果,并對效果進行了實時錄制拍攝。 在攝像頭追蹤范圍內快速移動手柄,幾乎感覺不到任何延時; VR體驗的核心在于沉浸感以及更本能的交互方式,所以在一些體驗中會有大幅度的手部動作交互,如拉弓射箭、扔手榴彈、跳舞、繪畫等,在這些場景中往往手的動作會跳出攝像頭的捕捉范圍。如果手柄漂移、丟失或者延時高、反饋慢的話,體驗將大打折扣,游戲的話甚至直接影響比分結果。在Camsense XR實測過程中,當手臂大幅度揮動時,在回到視角范圍內的瞬間,手柄也隨之出現,重定位算法可以在1ms之內完成手柄姿態的初始化定位,非常及時。

除了測試了以上兩個部分之外,VR陀螺還現場測試了該套件的另一個功能——單目6DoF追蹤。一般來說正如人眼一樣,空間定位也需要兩個攝像頭來檢測深度,在一個攝像頭的條件下能否進行精準的定位追蹤?答案是可以的。 如視頻中所示,在一個攝像頭被遮擋的情況下,追蹤的精度以及延時、響應速度絲毫未受影響。

深耕多年,Camsense死磕性能與成本

之所以能夠實現如此精準的定位追蹤,不僅與歡創這家公司自身的積累有關,同時也在于產品定義和設計細節。 歡創科技成立于2014年,專注于高精度定位傳感器研發,創始人之一周琨是清華大學本科和碩士,在計算機視覺空間定位與人機交互領域擁有十多年研究經驗,擁有20多項國際和國家發明專利。

雖然歡創科技成立時間并不長,但該公司至今已申請32項發明專利、4項已經得到授權,其中1項發明專利剛獲得美國專利局授權。歡創科技擁有完全自主知識產權的核心算法以及芯片。在這樣的團隊背景和底氣下,歡創科技運用核心算法——單目視覺定位,針對同領域進行算法的硬核化,形成了多條業務線,覆蓋了包括機器人、工業/醫療和VR/AR等領域。在機器人領域,其研發的基于ASIC芯片的單目視覺激光雷達被應用在諸多掃地機器人品牌上,在9月份單月出貨量超過了10萬臺,從默默無聞縱身一躍成為行業頭部供應商。另一款產品Camsense M Pro則用于工業、醫療等領域。如無人機測試,通過一套由多個單目相機組成的定位系統,檢測無人機飛行的空間坐標軌跡以及穩定性。

當談及歡創科技為何會關注VR時,周琨表示非常看好VR/AR的發展趨勢,其實早在2015年前后公司就在關注VR行業,一直在做技術儲備。 “我們堅持的一個基本前提是對VR行業長期看好的,并相信這個行業會得到很大的發展。這一點從Oculus和微軟等廠商對于VR行業近幾年的布局動作就可以看出來,如果不是朝陽行業,這些公司是不會在上面投入的。”

在堅定了VR的方向后,歡創科技將目光放在了手柄定位上,周琨提到,目前全球VR硬件企業中,擁有單目6DoF定位視覺追蹤技術的企業屈指可數。也正是考慮到未來有龐大的市場空間,所以反而在這條賽道上機會更大。 在這套方案的設計中,周琨也提到了諸多細節方面,比如選擇了主動光源而非被動光源。“主動光源的好處是不會受光線明暗的影響,也不會受周圍環境的本身紋理復雜程度的影響。即使在一個純白的環境,也可以進行追蹤。”

外觀設計上,采用了常見的環形外觀,整體體積相比同類產品縮小不少。手柄上主動發光點分布于圓環各處,便于精準追蹤。 在手柄的參數中,VR陀螺注意到傳感器的幀率為30幀,在60、70、90幀為主流的背景下,為何偏偏要降到30幀?

“我們盡量降低對硬件的要求,拔高系統的算法能力,而且同時不能夠犧牲用戶體驗,其實這對于我們來說難度是很大的。”周琨坦言。Camsense與Oculus和微軟的追蹤方案相似,都有頭部和手部定位、也都采用單目傳感器和主動光源手柄,但最大的不同仍然在于算法處理所依據的硬件條件

Oculus和微軟能夠大膽地使用高成本技術,提高硬件和配置要求,因此算法處理就會容易很多,而用戶也能夠體驗到微軟90幀率或Oculus產品4個單目攝像頭的良好定位效果。Camsense面臨的挑戰,就是如何做好硬件成本和優秀用戶體驗之間的平衡;以及如何應對客戶的多樣化需求,并最終達到追蹤效果的一致性。

Camsense XR的優勢,主要體現以下兩個方面: 首先是定位算法能在低配置硬件上實現高配置硬件同樣的性能。Camsense XR主要依靠高精度定位算法,但最少可以只使用兩個30幀幀率的,分辨率為VGA的單目鏡頭,可以達到 其它廠家60幀幀率的動態定位精度。這是Camsense面向多種客戶需求還能達到一致追蹤效果的關鍵。由于客戶需求多樣,需要適配不同的處理終端,PC端能夠處理高符合運算,但基于手機處理方案的VR一體機卻不能在定位上消耗過多性能,為了最大化降低門檻,如何在低配硬件基礎上實現高質量的追蹤效果成為了需要攻克的課題。

周琨提到,在設備中共有三種計算資源,一種是GPU,主要進行圖像處理或者游戲等并行計算場景;一種是DSP,主要用于運行頭部VSLAM等計算機視覺算法或者深度學習算法;還有一種是ARM計算資源,僅用于輕量級運算,如微信,支付寶等手機上常見的各種APP程序。而Camsense XR在運算中,使用的就是第三種計算資源--ARM,所以內存占用僅50M,1.95GHz的雙核CPU就能運行。

降低功耗畢竟只是解決了適配性和成本問題,用戶體驗也是一道挑戰。既然硬件的基礎降低了,如何保證體驗效果不被影響?周琨表示,只能以高精度的算法彌補硬件的不足。Camsense XR對于復雜環境下的追蹤,從頭部端到芯片處理再到終端交互的算法繼承自其工業級的亞亞像素高精度定位算法,其精度可以達到5m大空間范圍內,0.2mm的絕對平均誤差,此技術在今年已獲得美國專利局的發明專利授權。

結語

注意到,在訪談過程中,周琨一直在強調要做“有意義”的產品。他從消費者、客戶、企業開發人員、產品和整個市場環境角度考慮,不斷打磨Camsense XR的產品定義,即使有能力投入更多的資金和時間達到更亮眼的功能效果,比如做頭部SLAM定位,但另一方面就會失去歡創科技自身的獨特性。 隨著Daydream、Gear VR淡出歷史舞臺,3DoF時代已經結束。而6DoF產品的核心——定位追蹤,也將變得越來越重要。而這,也將為歡創科技帶來更多機會。

責任編輯:gt

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 微軟
    +關注

    關注

    4

    文章

    6612

    瀏覽量

    104162
  • 激光
    +關注

    關注

    19

    文章

    3222

    瀏覽量

    64591
  • vr
    vr
    +關注

    關注

    34

    文章

    9641

    瀏覽量

    150407
收藏 人收藏

    評論

    相關推薦

    激光錫焊視覺定位技術的應用場景

    本文主要介紹視覺定位概念、一種基于視覺定位的激光焊接系統的結構和組成,及該焊接系統在某些特定場景的具體應用。
    的頭像 發表于 12-13 09:10 ?164次閱讀
    激光錫焊<b class='flag-5'>視覺</b><b class='flag-5'>定位</b><b class='flag-5'>技術</b>的應用場景

    機器視覺 播報 小米15系列正式發布

    1 小米發布15系列 ? 10月29日,小米召開以《新起點》為主題的新品發布會,正式發布邁向AI全生態的小米澎湃OS 2(Xiaomi HyperOS 2),和堅持體驗優先、產品力越級
    的頭像 發表于 10-31 14:48 ?667次閱讀
    機器<b class='flag-5'>視覺</b> <b class='flag-5'>歡</b><b class='flag-5'>創</b>播報 小米15系列正式<b class='flag-5'>發布</b>

    onsemi 圖像傳感技術助推您視覺產品創新

    運動偽影。學習收獲1.熟悉圖像傳感產品技術特點及系統應用架構。2.熟悉機器人、安防、機器視覺、工業檢測等領域圖像產品
    的頭像 發表于 08-30 13:01 ?299次閱讀
    onsemi 圖像<b class='flag-5'>傳感</b><b class='flag-5'>技術</b>助推您<b class='flag-5'>視覺</b><b class='flag-5'>產品</b>創新

    微視傳感高性能3D視覺產品亮相2024上海機器視覺

    近日,2024上海機器視覺展在上海新國際博覽中心隆重舉行,微視傳感攜最新的高性能3D視覺產品亮相E2館2121展位,得到廣泛關注,這次展會不僅是微視
    的頭像 發表于 08-06 15:15 ?689次閱讀
    微視<b class='flag-5'>傳感</b>高性能3D<b class='flag-5'>視覺</b><b class='flag-5'>產品</b>亮相2024上海機器<b class='flag-5'>視覺</b>展

    科技青島子公司盛大開業,開啟發展新篇章

    在青島市經濟繁榮與創新活力的雙重驅動下,2024年7月26日上午,深圳市科技股份有限公司全資子公司——青島智造科技有限公司在青島嶗山區石老人創業園盛大開業。來自青島高科園管委、
    的頭像 發表于 07-29 15:59 ?350次閱讀
    <b class='flag-5'>歡</b><b class='flag-5'>創</b>科技青島子公司盛大開業,開啟發展新篇章

    小個頭大技術XR設備上的圖像傳感

    、底部、側面和紅外攝像頭等。那么在XR設備上,對圖像傳感器又有何種要求,我們以這幾年發布的新品來分析一下。 ? 小尺寸的全局快門圖像傳感器 ? 即便是VR設備,在透視模式下也需要對外界
    的頭像 發表于 06-04 00:15 ?2641次閱讀

    【機器視覺播報 | 比亞迪第五代DM混動技術正式發布

    1 比亞迪第五代DM混動技術正式發布 5月28日,比亞迪第五代DM技術發布暨秦L DM-i、海豹06 DM-i發布會在西安舉行。第五代DM
    的頭像 發表于 05-30 10:53 ?831次閱讀

    激光焊接視覺定位引導方法

    激光焊接是一種高效、精確的焊接技術,廣泛應用于汽車制造、航空航天、電子產品等領域。隨著工業自動化和智能化的發展,激光焊接的精度和效率需求日益增加。在此背景下,視覺定位引導
    的頭像 發表于 05-28 10:34 ?537次閱讀
    激光焊接<b class='flag-5'>視覺</b><b class='flag-5'>定位</b>引導方法

    3D視覺技術慣性環上料領域的未來發展

    隨著制造業的智能化和自動化水平不斷提升,慣性環作為汽車發動機減震器中的核心組件,其精準、高效的上料過程顯得尤為關鍵。作為實現這一目標的重要技術手段,3D視覺技術
    的頭像 發表于 05-21 16:06 ?317次閱讀
    3D<b class='flag-5'>視覺</b><b class='flag-5'>技術</b>在<b class='flag-5'>慣性</b>環上料領域的未來發展

    手機顯示屏二維碼讀取,產品視覺定位,外觀檢測應用軟硬件配置方案

    手機顯示屏二維碼讀取,產品視覺定位,外觀視覺檢測應用等
    的頭像 發表于 05-20 00:31 ?394次閱讀
    手機顯示屏二維碼讀取,<b class='flag-5'>產品</b><b class='flag-5'>視覺</b><b class='flag-5'>定位</b>,外觀檢測應用軟硬件配置方案

    基于原子體系的量子慣性傳感器研究現狀綜述

    慣性傳感器的性能直接決定慣性導航系統的精度。基于原子體系的量子慣性傳感器有望在更小體積和更低成本下達到傳統
    的頭像 發表于 05-10 09:13 ?980次閱讀
    基于原子體系的量子<b class='flag-5'>慣性</b><b class='flag-5'>傳感</b>器研究現狀綜述

    SGS簽發全球首張XR品類低視覺疲勞A+金標認證

    上海2024年3月5日?/美通社/ -- 隨著XR技術和產業鏈逐步發展,XR產品迎來更加快速的更迭。在硬件突破的同時,護眼問題也成為消費級XR
    的頭像 發表于 03-06 15:48 ?488次閱讀
    SGS簽發全球首張<b class='flag-5'>XR</b>品類低<b class='flag-5'>視覺</b>疲勞A+金標認證

    VITURE One XR眼鏡榮獲SGS低視覺疲勞A+金標認證

    近日,國內領先的XR技術公司VITURE宣布其新款產品VITURE One XR眼鏡在國內首發。該產品憑借其卓越的性能和創新的設計,成功獲得
    的頭像 發表于 03-06 09:47 ?1182次閱讀

    村田發布了一款新的6軸MEMS慣性傳感器SCH16T-K01

    據麥姆斯咨詢報道,綜合電子元器件全球制造商村田(Murata)近日發布了一款新的6軸MEMS慣性傳感器SCH16T-K01,可實現高精度機器控制和定位應用。
    的頭像 發表于 01-17 09:59 ?1110次閱讀
    村田<b class='flag-5'>發布</b>了一款新的6軸MEMS<b class='flag-5'>慣性</b><b class='flag-5'>傳感</b>器SCH16T-K01

    科技亮相2024 CES,共同探討科技未來

    科技攜公司最新激光雷達、VR/AR手柄、空間定位跟蹤系統等相關產品與解決方案重磅亮相本次行業盛會。 科技本次參展展示了多款激光雷達產品
    的頭像 發表于 01-15 11:50 ?896次閱讀
    <b class='flag-5'>歡</b><b class='flag-5'>創</b>科技亮相2024 CES,共同探討科技未來
    主站蜘蛛池模板: 国产亚洲精品久久久久久午夜| 99热官网| 日本人六九视频69jzz免费| 狠狠草视频| 操插干| 日本人69xxxxxxxx69| 无遮挡很爽很污很黄的网站w| 男操女免费视频| 人人添人人澡人人澡人人人爽| fxxx性xxx性| 天堂最新版资源www在线| 色婷婷六月| 久久这里只有精品免费播放| 国产三a级日本三级日产三级| www.4hu影院| 热之国产| 分分精品| 一级做受毛片免费大片| 色欧美色| 国产婷婷一区二区三区| 午夜影视在线免费观看| 中文字幕在线观看日剧网| 一级特黄女人生活片| 色综合中文字幕| 久久亚洲综合中文字幕| 6月婷婷| 国产午夜在线观看| 亚洲先锋资源| 无夜精品久久久久久| 2021色噜噜狠狠综曰曰曰| 午夜免费福利片| 美女性色| 午夜视频免费| 999久久精品国产| 二区视频在线| 日本高清午夜色wwwσ| 国产盗摄女子私密保健视频| 天天爱天天做天天干| 成年1314在线观看| 性生大片一级毛片免费观看| 特黄特级高清免费视频毛片|