2020谷歌開發者大會開啟,AR軟件工程總監王啟文發布ARCore最新動態
VR陀螺11月18日消息,Google 開發者大會 (Google Developer Summit) 是谷歌面向開發者展示最新產品和平臺的年度盛會。2020 Google 開發者大會于 11 月 16 日 至 21 日舉行,這是谷歌首次以全線上大會的形式與中國開發者相聚。本次大會以“代碼不止”為主題,介紹了相關產品更新以及一系列面向本地開發者的技術支持內容,旨在賦能開發者高效創新、持續不斷地創造愉悅的產品體驗。
其中,11月16日,谷歌軟件工程總監王啟文(Leon Wang)發表了關于“ARCore為用戶創造有效的AR體驗”的主題演講。
王啟文Leon是 Google AR 團隊的軟件工程總監,主管ARCore 的機器感知算法項目,如運動跟蹤和深度感知等技術的開發。加入 Google 之前,他在 Microsoft, Facebook 和 Pinterest 先后擔任過工程經理。Leon擁有麻省理工學院計算機科學的學士和碩士學位。
首先,王啟文強調了AR作為一種視覺沉浸式媒介,能夠吸引人們的注意力,是一種體驗信息的新方式,并最終推動用戶的行動。而谷歌發布于2018年的ARCore是AR開發者平臺,提供了簡單而強大的工具,為Android和iOS用戶創造有效的AR體驗。目前已被應用在7億臺設備和成千上萬款app上,并且已獲得一些更新。
其中,王啟文介紹了包括美圖、滴滴、有道少兒詞典的中國開發者如何使用ARCore提高產品的性能和體驗。
美圖公司利用ARCore的增強面孔API(Augmented Faces API)構建了100多個自拍濾鏡,就是現在我們在BeautyPlus上可以體驗到的AR特效,用戶可以拍攝照片和視頻與朋友分享。
增強面孔API(Augmented Faces API)從2D圖像中生成3D網格,可追蹤嘴部動作、眨眼、點頭和一些復雜的細節。
滴滴的ARCore導航功能幫助乘客在火車站、商場和機場等大型公共區域找到司機。滴滴地圖中加入了AR路標,15%的用戶使用AR來引導他們找到訂單司機,80%的用戶給出好評。
有道少兒詞典應用使用AR來幫助孩子們以一種有趣和吸引人的方式學習新單詞。該應用將“三角龍Triceratops ”等單詞與其3D模型在AR中配對,父母可以把AR畫面錄制或拍照,方便日后成為孩子們可參考的學習材料。
另外,ARCore的新增功能如下:
迅速放置API(Instant Placement API)
一般來說,用戶在空間中放置過ar對象時,需要先用手機掃描周圍的環境,完成3D表面檢測。但這個過程將耗費一些時間和精力。實際上,在大多數情況下,我們不需要知道AR對象確切的3D位置也可以正確地呈現它。
借助迅速放置API和幾行代碼,開發人員可讓用戶將AR對象錨定到2D圖像中,而不需要確切知道AR對象具體的3D位置。如果需要更精確的比例,可以針對3D位置進行三角測量。
景深應用API(Depth API)
景深API可以從單個RGB相機生成地圖。原理是通過不同角度拍攝多張圖像,并在移動手機時進行比較,以估計到每個像素的距離。盡管只有一個RGB相機,添加了景深傳感器(如飛行時間傳感器),會讓景深地圖效果更好。
景深可以通過多種方式增強AR真實感,“遮擋”是其中一種景深應用,即隱藏數字物體在現實世界中被遮擋的部分,從而使它們看上去像是在現實場景中真實存在。
另一種是“表面交互”,即在設備中的世界里,添加3D層面的計算,可以實現與現實物品表面的交互,比如創意AR對象,并在其表面設計反彈和飛濺的動作。此功能可以用于開發新的交互式游戲機制,使玩家能夠躲在真實物體的后面。Snapchat的Dancing Hotdog和Undersea World Lens效果都使用了景深。
Persistent Cloud Anchors API
Cloud Anchors API可用于與多個用戶共享ar對象。在相同物理空間中的不同位置同時查看這些對象并與之交互,AR內容也因此可使用更長時間。
這相當于一個“保存按鈕”,人們可以基于相同的AR體驗進行創作并進行反復修改。比如,Sybo和iDreamSky的Mark應用采用了該功能,人們可以在現實世界中與朋友一起創建、發現和共享ar藝術。
Epic Games本周收購實時人臉動畫公司Hyprsense,該公司關注于能將面部動作實時轉換為動畫3D形象的人臉捕捉運動。
Hyprsense前身為Binary VR,該公司最開始從事VR解決方案,用懸掛在VR頭顯前方的3D紅外線捕捉相機準確捕捉面部運動數據,并在2017年交付用于原始Oculus Rift 、HTC Vive等頭顯的開發套件。
現在,三年過去了,該公司更名為Hyprsense于本周被Epic Games收購。雖然Hyprsense不再是一家專注于VR的企業,但其使用的技術能通過手機攝像頭進行實時面部動作捕捉,然后將其轉換為手機屏幕上的實時3D動畫,如下所示。
其原理類似于Instagram和Facebook等社交媒體應用程序中的AR臉部追蹤技術,Hyprsense在此基礎上向前邁了一步,允許用戶使用高度相似的3D頭像來替代用戶的臉部。
Epic Games首席技術官Kim Libreri在一份聲明中說:“Hyprsense團隊的加入有助于我們繼續推動數字角色創新,朝著讓所有創作者能盡情表達其創意的目標靠近。”
Epic表示,Hyprsense團隊的主要工作是與其合作進行游戲開發和數字人類項目的工作,這將加快Epic為開發人員和玩家構建更好的新工具和系統的過程。
2020年11月評論數和評分最高的Quest游戲與應用程序
雖然Oculus并沒有公開多少信息供大家了解各個應用程序在其VR商店中的表現,但通過查看應用程序之間的相互關系,可以獲得一些信息。以下是截至2020年11月排名前20的Oculus Quest游戲和應用程序快照。
為什么要發布這些數據?
雖然SteamVR庫擁有全面的跟蹤數據庫,但卻并沒有類似數據庫存來跟蹤Oculus商店的應用程序。因此,我們發布這些數據以讓用戶、開發人員和分析師深入了解Oculus應用程序的前景。
做一個簡要的介紹:
付費與免費的應用程序分開評定
參評應用程序的評論數量需達到100條及以上
四舍五入的評分會讓部分應用程序評分相同,但其排名按精確評分排序
最受好評的付費Oculus Quest應用程序
每款應用程序的評分反映了用戶的綜合評論與大家對每款游戲的接受程度。
評分數量最多的付費Oculus Quest應用程序
一般通過評分數量便可大致了解每款游戲的相對銷量,數量高的游戲很可能比低的游戲賣得好。不過這樣的判斷方式肯定存在一定誤差。
最受好評的免費Oculus Quest應用程序
評分數量最多的免費Oculus Quest應用程序
《假期模擬器》增加Quest手部追蹤支持
11月17日,《假期模擬器》(Vacation Simulator)開發者Owlchemy Labs的首席執行官Devin Reimer在Twitter上發布了一段視頻,其中顯示了《假期模擬器》的場景,我們可以看到該游戲增加了手部跟蹤支持,測試者在視頻中比出了勝利手勢和大拇指。
Owlchemy的游戲我們都非常熟悉,因此玩家大概能很快識別出來手勢識別的穩定性。雖然Oculus Quest手勢追蹤功能已推出,但是除了《里奇的木板體驗》(Richie‘s Plank Experience),《巫師圓舞曲》(Waltz of the Wizard)和《虛擬桌面》(Virtual Desktop)之外,并沒有其他游戲支持手部追蹤功能。
Owlchemy的《假期模擬器》和《工作模擬器》(Job Simulator)目前都登陸了Oculus Quest,并且最近針對Oculus Quest 2進行了增強。這兩款游戲的v23版本更新部分包括視覺上的升級,刪除了偏重的渲染,并在Quest 2上支持90Hz。
《假期模擬器》 最近還提供了免費的“Back to Job”擴展功能,這是將模擬器系列第一部《工作模擬器》中的部分機制添加到了《假期模擬器》 中去,提高游戲的趣味性。
《Echo Arena》VR電競聯賽第三賽季將于2021年1月開賽
VR大師賽(VR Master League,簡稱“VRML”)的《Echo Arena》電競聯賽第三賽季將于2021年1月開始舉行,其結構和形式與往屆相比會有所擴展。
聯賽具體時間是從1月4日開始,一直持續到5月2日,決賽定在5月8-9日和5月14-15日舉行。
作為新賽季擴展的一部分,VRML Echo Arena Discord頻道已在本周開放,它將作為玩家和社區領導人監督聯盟的樞紐。頻道將安排花名冊、提供討論聯賽規則的場地等。
新賽季還將引入晉級/降級模式,該規則在游戲商店Discord中的概述如下:
“大師賽將以循環賽制進行,后續賽則采用階梯賽制。本賽季將有多輪比賽,每輪都以挑戰者杯結束。挑戰者杯將由排名倒數2位的大師隊和排名前4位的鉆石隊來決定哪些團隊將有資格參加大師賽和階梯賽。”
之前的《Echo Arena》電競聯賽都在Twitch以及Oculus Venues上進行了現場直播,VR用戶能在虛擬社交環境中觀看比賽。VRML還為其他競技類VR游戲比如第一人稱射擊游戲《Onward》組織聯盟。
于幾個月前上線Oculus Quest平臺的《Echo Arena》采用競技類多人游戲模式,該游戲源自2017年在Rift推出的《Lone Echo》中獨立的單人游戲故事。
有興趣參加第三季聯賽的玩家,現可在VRML Echo Arena Discord網站創建帳戶,并加入VRML Echo Arena Discord服務器。
責任編輯:PSY
-
谷歌
+關注
關注
27文章
6171瀏覽量
105492 -
API
+關注
關注
2文章
1502瀏覽量
62119 -
開發者
+關注
關注
1文章
577瀏覽量
17031
發布評論請先 登錄
相關推薦
評論