手機觸屏竟成混合現實？蘋果指戴式裝置拿下專利
【獵雲網（微訊號：）】1月28日報道（編譯：楊卟咚）
獵雲網注：本文作者馬克·蘇利凡（Mark Sullivan)為Fast Company的記者。
蘋果向來擅長把使用者介面從個人電腦推廣到手機和智慧手錶上。目前，蘋果的工程師正在考慮將手機觸屏轉變為混合現實（Mixed Reality，MR），很可能會構建出良好的使用者體驗。最近，蘋果正在申請手勢控制專利，這似乎也透漏出了蛛絲馬跡，表明公司對混合現實已做出了方方面面的考量。混合現實是一種可穿戴系統，該系統可以在真實環境中呈現虛擬場景，通過感知手指運動，就能控制混合現實空間中的數字內容。
過去幾年，蘋果一直在為混合現實的工作打基礎。2017年，該公司釋出了ARKit框架，幫助開發人員構建了數千個增強現實應用。這些應用必須通過iPhone或iPad來體驗，所以使用起來有點笨重。而且，這類應用很快就會嵌入到眼部裝置中，蘋果肯定不會設計笨重的頭戴裝置，所以只有等到出現合適的增強眼鏡，能把所有混合現實部件組合在一起時，混合現實應用才能有用武之地。
控制和駕馭混合現實的裝置與方式雖然稍顯笨拙，但卻在不斷髮展。混合現實領域中的領先裝置（例如Hololens和Magic Leap）可以讓使用者使用手勢進行導航和控制。但跟蹤所需的深度攝像頭和感測器需要容納空間，因此這類頭戴裝置並不小巧。而將手部動作感測器移動到身體上的其他地方則能有效減小頭戴裝置的規格。蘋果此次申請的專利稱為“含感測器和觸覺反饋的指戴式裝置（Finger-mounted Device with Sensors and Haptics）”，是一種包含了多種感測器的指戴系統。每個手指上都配備了多種型別的感測器，光學感測器可以測量指尖的運動，加速度感測器計有助於測量手勢。
指戴式裝置讓指尖保持裸露，指節上的感測器用於檢測指尖“按壓”或“滾動”等操作。指戴式裝置可以通過內建的觸覺反饋單元響應使用者的觸控或手勢。專利稱，指戴式裝置可用於控制虛擬現實或增強現實系統，當用戶在桌面上進行手指點選時，可以為使用者提供在物理鍵盤上進行互動的感覺。
蘋果並不是唯一一家考慮混合現實輸入問題的大公司。谷歌近幾年來一直在開發一種基於手勢的控制系統“Project Soli”。Soli的感測器使用微型雷達系統捕獲三維空間內的手部運動。到目前為止，谷歌已經將雷達感測器應用在智慧手錶和電視等中，實現了手勢控制，所以該技術有望在更復雜的現實背景下跟蹤手勢。一位專家表示，像智慧手錶這樣的可穿戴裝置也有可能嵌入雷達感測器，然後雷達感測器會向用戶的手發出雷達波束以檢測手勢。谷歌顯然對Soli非常看重，公司最近請求聯邦通訊委員會（Federal Communications Commission，FCC）批准專案在更高功率的頻段上執行，以獲得更精確的手勢。去年年底，聯邦通訊委員會批准了這一請求。
三星也在積極開發混合現實的手勢控制系統。美國專利局公佈了三星的專利申請，該專利提出了一款虛擬現實頭戴裝置，結合三維感測器和紅外感測器來檢測使用者手部的複雜動作。三星提交了另一份專利申請，其中也使用了類似的技術來控制增強現實系統中的內容。
目前，蘋果的ARKit和谷歌的ARCore都是藉助手機背面的普通2D攝像機，實現了基於手機的增強現實（如Pokémon Go)。不過，把增強現實從手機推向眼鏡之前，仍存在可開發的空間。目前，3D攝像頭已能繪製出3D數字內容，智慧手機制造商顯然也希望將它們用作後置攝像頭。彭博社去年12月的報道稱，華為計劃在2019年將索尼3D攝像頭用作幾款新手機的後置攝像頭。報道援引訊息人士的話，3D攝像頭不僅僅能用於拍攝3D照片和空間掃描，還能用於跟蹤手勢。
iPhone X把3D攝像頭用作前置攝像頭進行面部識別，也因此誕生了Animoji和Memoji。但如果把3D攝像頭用作後置攝像頭，則能實現更多功能。如果房間的3D圖更加精確，那麼ARKit應用程式就能以更逼真和功能性更強的方式來部署內容。與之類似，3D攝像頭也可用於跟蹤手勢。
蘋果專利中的技術常常沒有進入市場，即便成功了，最終的形式也與專利中所描述的截然不同。蘋果的“指戴式”裝置專利是公司所解決過的最有趣的問題。蘋果正在認真考慮使用者介面的下一個潮流，期待憑藉合適的時機和技術引領混合現實，就像最初引領移動體驗一樣。