Google研究團隊以MediaPipe開源演算工具用於建立手指追蹤演算法,通過使用機器學習來偵測手部21處關節點,來感知手的形狀和移動,來達到手部追蹤、自動辨識。

08/24~09/06精選AR‧VR新聞

 混合實境   微軟  

微軟二代混合實境頭戴裝置HoloLens 2,預計將於9月推出上市

原定計畫今夏開賣的微軟新一代混合實境頭戴裝置HoloLens 2,卻遲遲未見其上市的消息。不過,該公司執行副總Harry Shum最近在參加上海舉行的世界人工智慧大會時,向在場的參加者預告,該裝置將於9月推出上市。此前,根據微軟官方公布資訊,第二代HoloLens售價3,500美金,並提供了開發商版和企業用標準版。首波供貨市場包括美國、加拿大、日本、中國、德國、英國、愛爾蘭、澳洲、紐西蘭及法國。HoloLens 2結合新的ToF測距感測器,並搭載AI與語意理解能力,還能提供眼動追蹤,可以更自然地與不同物件互動,另外也支援虹膜辨識,能使用Windows Hello企業身分來登入。除了使用介面和操作性能大幅提升外, HoloLens 2 也可搭配微軟的Dynamic 365應用,包括AR版遠端桌面Remote Assist、室內設計用的Layout及裝配產線員工使用的Guides等。

擴增實境   Google  

Google將ARCore重新命名為Google Play Services for AR服務

近日,Google悄悄地將自家行動擴增實境開發平臺ARCore更名,改以Google Play Services for AR做為該服務新命名,來取代原有的ARCore服務名稱。ARCore是Google推出的擴增實境(AR)軟體開發套件(SDK),去年2月釋出1.0版,讓開發者可以用它在Android平臺上來開發各種AR應用,而在今年5月最新一版更新中,則是加入擴增影像(Augmented Images)和光線評估(Light Estimation)功能,讓開發者可以打造出更有互動感和真實感的AR體驗。不只是採用新名稱,該公司也宣布在新版可以支援在如Pixel 2和3手機提供高達60fps影像渲染的逼真畫面,從而帶來更流暢的影像預覽和優化的AR體驗。

臉書    VR  

臉書展示更逼真的VR虛擬化身系統,能夠像真人做出生動表情實現遠距交流

臉書的AR / VR研發小組Facebook Reality Labs近日揭露其正在開發的一套Codec Avatars虛擬化身系統,能夠偵測各種臉部表情,可以幫助使用者更容易建立逼真的虛擬化身。只要戴上他們開發的VR頭戴裝置,通過該裝置上的3個攝影鏡頭,就能用來捕捉使用者的面部表情,包含眼睛、嘴巴等動作,因為結合機器學習和電腦視覺,讓這套系統能比傳統方法更能準確地呈現出複雜面部表情的細微差別,包括咬唇、臉頰及舌頭動作的位置變化都能捕捉,而且是即時動態呈現,適用運用在需要遠距交流的虛擬實境社交互動中。該小組還發表了他們的完整研究論文,提供深入研究該系統背後的方法和實作原理。

Google   手勢操控  

Google開源釋出手勢操控演算工具,用手機就能執行手勢追蹤

Google日前公開了新的手勢操控方法,可以透過其開源釋出的一個MediaPipe演算工具,在行動裝置上即時完成多點手指追蹤。MediaPipe是一個開源的跨平臺框架,可以用來建立處理來自不同樣態的感知數據,如聲音或影像等,該研究團隊將MediaPipe用於建立手指追蹤演算法,通過使用機器學習來偵測手部21處關節點,來感知手的形狀和移動,來達到手部追蹤、自動辨識。不像其他的手部偵測作法,必須要依賴強大的電腦,Google表示,採用這套演算工具,可以在手機上就能執行,而且不只能偵測雙手的動作,甚至可以擴大追蹤到多手。因此,也很適合用在需要大量手勢控制的VR應用,來取代傳統VR控制器。

天氣預報   混合實境  

五級超大颶風侵美!美國天氣公司也以3D混合實境來教導觀眾如何做好防颱準備

美國天氣公司The Weather Channel日前在播報今年第一個五級超大颶風多利安(Dorian)即將侵襲美國時,也採用3D混合實境技術,來教導電視前的觀眾如何做好防颱準備。從影片中可以看到,氣象播報主持人Stephanie Abrams站在民宅前院草坪上,逐一講解遭遇風暴的安全和疏散技巧,從登陸前的48小時開始,到風暴來臨前幾分鐘,以MR方式來模擬不同階段颶風帶來的威力強度,比如刮強風、雷雨、甚至倒塌的路樹等,通過這種身臨其境的體驗,讓民眾提高警覺,以降低颶風帶來的傷亡。在早之前,該公司去年也曾在播報佛羅倫斯颶風襲擊美國時,結合了混合實境來預測暴風路徑。

AR    兒童眼鏡  

美國眼鏡商推出AR鏡框應用,讓兒童購買前可先試戴找出最合身的眼鏡鏡框3

美國兒童眼鏡商Fitz Frames近日推出一款AR應用程式,可以讓家長替小孩挑選最適合自己配戴的近視眼鏡或太陽眼鏡鏡框,只要用手機打開App,會先拍攝和測量小孩的臉型,以便根據小孩的臉型來提供不同鏡框尺寸。該應用提供了6種不同設計鏡框,每個鏡框也有多種顏色可挑選。透過AR技術,兒童還可以選擇虛擬鏡框進行試戴,也可以在手機上以不同角度來查看,看適不適合,再決定要不要購買。下訂之後,會以3D列印方式將鏡框製作出來,寄送給消費者。每副售價95美元。不過目前該App僅是測試版,且僅支援iOS平臺。

蘋果   AR眼鏡  

iOS13揭密!蘋果正在開發代號「Garta」的AR眼鏡

雖然前不久才傳出蘋果已中止AR眼鏡的開發工作,但是近日有國外媒體在本月新款iPhone即將發布的iOS 13測試文件中發現,蘋果正在開發一款名為「Garta」的AR眼鏡,還能夠搭配使用一款可支援立體聲的AR應用程式StarBoard,並提供了可切換的頭戴式模式,這也意味著,iOS 13也可支援AR頭戴裝置。更進一步分析iOS 13程式碼,也能發現許多與AR相關的名稱描述,如ARStarBoardViewController、ARStarBoardSceneManager等。此前,多位知名分析師也都聲稱,蘋果計畫在2020年推自家AR眼鏡。不過至今,蘋果官方仍未證實這項消息。責任編輯/余至浩

圖片來源/微軟、Facebook Reality Labs、Fitz Frames、The Weather Channel、Google

 更多AR‧VR動態 

1.澳洲科研機構Data61宣布將成立國家混合實境實驗室,聚焦發展數位分身在製造業的產業應用

2.HTC以Vive Focus展示VR賞屋應用,最多一次可6人同時觀看互動

3.美國NBC與MSNBC氣象播報也結合AR地圖預測颶風多利安路徑

4.VR電影正夯! HTC一連以5部原創VR電影入圍威尼斯影展

資料來源:iThome整理,2019年09月


Advertisement

更多 iThome相關內容