透過新增的Depth API功能,開發者能夠使用Google自有的運動影像深度演算法,搭配一臺RGB相機,來建立一個視覺深度地圖,可用來強化虛擬物件與真實世界的互動關係,以提高沉浸式的互動體驗。

11/22~12/20精選AR‧VR新聞

 擴增實境    ARCore  

Google更新ARCore,結合運動深度演算法讓AR物體能更逼真呈現

Google近日替自家AR體驗開發平臺ARCore新增了一個Depth API功能,可以允許開發者使用Google自有的運動影像深度演算法,搭配一臺RGB相機,來建立一個視覺深度地圖,用以提高沉浸式的互動體驗。其中一項應用就是虛擬物件的遮蔽功能,可用來強化其與真實世界的互動關係,例如將一隻虛擬小貓放在沙發上,只要開啟遮蔽功能,手機畫面就會看到小貓身體局部被沙發給遮蓋住,不像以往和真實世界的場景重疊,看起來,就像真實存在的物體那樣。

主要是通過拍攝多張不同角度的照片,並在移動手機時對於這些照片進行比較,藉此計算出畫面上所有真實物件在場景中的相對距離,比如距離手機越近的區域就標示為紅色,越遠區域則顯示藍色,從而建立完整的深度地圖。Google表示,一開始會先在Scene Viewer提供這項功能,未來亦可用它來開發互動式AR遊戲。美國室內設計網站Houzz已使用Depth API來建立更逼真的虛擬展示間。早前,Google還介紹一項環境HDR功能,則是可將真實世界的光影效果帶進AR物體和場景。

擴增實境    網路銀行  

靠AR眼鏡就能完成轉帳!華南銀行展示金融AR應用新雛型

不只製造業,國內金融業也開始試用AR技術來提高用戶體驗,例如,華南銀行最近展示了一項未來網銀的概念設計,透過擴增實境(AR)眼鏡來呈現網銀App的介面,讓民眾能透過手部與頭部的協作,來查詢帳戶餘額或進行轉帳作業。甚至該公司委外設計了一款AR眼鏡,重新將網銀App的直式UI介面重新設計成橫式,讓用戶能透過眼鏡看見放大投影成60~80吋的介面;而其搭配的飛時測距(Time of Flight, ToF)3D感測技術,則是能讓用戶直接用手在空間中操作,「因為ToF會透過紅外線感測手部動作,根據紅外線回應的時間差,來計算手在空間中的位置。」華南銀行資深專員表示,透過AR眼鏡與ToF技術,能提供3D的使用者體驗。

高通   XR平臺  

AR眼鏡也將能支援5G連網,高通首款XR延展實境平臺Snapdragon XR2亮相

高通近日除了推出新款5G SoC晶片,還發布了第一款整合5G與AI技術的XR延展實境平臺Snapdragon XR2 5G platform,讓廠商更容易用它來設計結合5G的AR、VR或MR眼鏡。相較先前Snapdragon 835,新款Snapdragon XR2平臺提升多達2倍效能,4倍影音頻寬,以及6倍影像解析度,能以每秒60幀觀看立體8K影片,並借助高通5G技術,來提供更流暢XR使用體驗。Snapdragon XR2本身內建7個攝影機,同時可用於高精度物體跟蹤與手勢識別,還能透過AI技術來降低裝置功耗,並優化性能,另外也提供了語音UI與加入周遭環境感知能力,除了讓使用者可以透過語音指令來操作XR裝置之外,裝置本身也能夠同時監測並分辨真實場景需要留意的干擾音源,來提醒用戶注意,如小孩哭聲或門鈴聲等。目前已有多家業者採用,如Spatial、Niantic等。

混合實境   醫療教學  

國防醫學院啟用全臺首間MR解剖教室,可提供上千種3D人體構造加強學習

臺灣醫院除了已在醫療手術結合MR技術,近來也有醫學院結合MR輔助教學。國防醫學院近日正式啟用首間MR解剖學教室,讓師生只要戴上頭戴式裝置,就可在現有環境中,觀察擬真、細緻的人體組織構造。這套MR系統搭配了HTC頭戴式裝置Vive Pro與3D Organon解剖教學軟體,內建超過5,500種的人體結構器官、500多組生理動畫、120多套真實解剖圖,來協助學生理解各種人體組織結構的空間概念。像是可以在VR虛擬環境中觀察靜態人體模型,並藉由互動拆解,來更進一步加深對人體各器官組織細節的認識。目前配置大約40套頭戴式裝置,除了課堂上的使用,這套系統也提供VR模擬考題,讓學生在課前課後,都能在這上面使用虛擬手術檯與虛擬大體,來加強解剖知識。下一步更計畫利用它錄製各種VR解剖學課程,增加教學多元性。

臉書   AR廣告  

臉書全面開放AR廣告刊登服務,讓品牌商和創作者能透過Spark AR建立互動式AR廣告

臉書去年開始測試的AR廣告刊登服務,如今終於全面開放給所有品牌商及創作者來使用,讓他們可以透過臉書Spark AR平臺建立互動式AR廣告,來行銷和推廣自家品牌或產品。Spark AR是臉書推出的AR特效開發平臺,雖然早在2018年就已開放在臉書及Instagram上使用,但截至目前,只有少數特定品牌能夠在其廣告中使用該技術。隨著臉書AR廣告服務的全面開放,現在任一品牌商已可通過Facebook的Spark AR引擎製作屬於自己品牌的AR特效,並將該AR效果納入其廣告中,再通過臉書平臺的廣告定位系統來推播給目標用戶。但未包含Instagram。

聯想   AR眼鏡  

聯想展示專為PC用戶設計的AR眼鏡新概念,可將桌上螢幕延伸成虛擬多螢幕

聯想近日展示了專為PC用戶設計的一款全新AR眼鏡概念,讓用戶可以使用它來和PC或筆電同步作業,來執行工作上的各種應用、社交或互動遊戲等。聯想表示,穿戴者可在眼鏡內模擬將單一PC螢幕延伸成虛擬多螢幕,來進行各種畫面操作,而且除了攜帶容易之外,也可以加強用戶隱私。雖然,聯想並未透露該眼鏡的完整規格,但從官方釋出的影片來看,這副AR眼鏡內建了3顆攝影鏡頭,且需要與筆電相連,現場使用的筆電採用的處理器,則是第9代Intel Core i7和搭配GeForce GTX顯卡。

VR    牧場  

提高牛乳品質有新招,俄羅斯大型牧場試用VR來改善乳牛情緒提升乳量

有別以往多以播放音樂、身體按摩,來穩定牛隻情緒,以生產品質更好的牛乳,在俄羅斯有家大型牧場,最近開始試用沉浸式VR技術,來幫助紓緩乳牛的緊張情緒,他們將重新改良的VR頭戴裝置,裝在每頭乳牛的頭部位置,並依據乳牛視力對於光影顏色感知程度,來模擬建立出一個夏季田園的虛擬環境,用以測試其對於乳牛情緒的影響,結果發現,觀看這些VR畫面,有助於降低牛隻的焦慮感,進而提升乳量。未來更將擴大實驗規模。責任編輯/余至浩

 

攝影/洪政偉 圖片來源/華南銀行、Google、高通、臉書、聯想、莫斯科地區農業和食品部

 更多AR‧VR動態 

1.Adobe買下臉書Oculus的繪畫與雕塑應用Medium

2.Sony新VR專利文件曝光,將替自家VR裝置加入視訊會議功能

3.Magic Leap替自家新款AR眼鏡釋出企業版軟體開發套件

4.PwC預測看好VR/AR產業發展,2030年將替全球經濟成長挹注1.5兆英磅

資料來源:iThome整理,2019年12月


Advertisement

更多 iThome相關內容