作者：Coventor（泛林集團旗下公司）全球MEMS業務運營及歐洲技術總監Gerold Schr?pfer 博士

下一波通信和社會技術將超越2D屏幕，向依靠增強現實和虛擬現實的沉浸式體驗方向發展，這個新平臺也就是我們所說的“元宇宙”。元宇宙是Meta?的愿景，即與真實的物理世界連接的虛擬世界互連網絡。雖然大家都在熱議元宇宙，但多數人對元宇宙的功能和實現方式仍處于霧里看花的階段。對于一部分人來說，電影《頭號玩家》里所構想的世界就是他們對于“元宇宙”的認知。

元宇宙的應用

許多人對元宇宙的普遍應用持懷疑態度。但幾乎每個人都可以列舉出與元宇宙相關、或者元宇宙驅動的技術創新如何賦能生活中其他領域的具體例子。游戲可能是元宇宙最明顯的應用案例。除此之外，元宇宙還可以幫助行動不便的人群（實際上是任何人）無需離開家中即可實現異地旅行；借助增強現實 (AR) 眼鏡中的自主內置攝像頭，你可以專心享受現場音樂會，不必分心進行活動錄像。元宇宙的其他應用還包括惡劣工業環境中的遠程機器維護、遠程學習或涉及遠程手術的遠程醫療?？偠灾?，沒有做不到的，只有想不到的。

元宇宙及用戶界面需求

元宇宙可以被看作是一個高度沉浸式的網絡，用戶可以在里面訪問基于AR和VR（虛擬現實）的環境。AR包括一系列將從根本上改變我們與周圍環境互動方式的技術，它意味著物理世界與數字世界的融合所帶來的豐富且嶄新的情景感知環境。AR和VR將推動下一代計算的發展，并不斷拉近計算機與人的距離，以至于似乎感覺不到兩者之間的邊界。要實現這一目標，需要大量的技術創新：從能夠無縫結合彼此無法區分的真實與虛擬內容的顯示器，到理解用戶意圖的無障礙輸入設備，所需的創新可謂巨大[1]。

實現這個新世界的先決條件是讓AR眼鏡（或其他具有可市場化外形的AR界面）等合適的用戶界面成為可能。而獲得全面AR體驗的最大挑戰之一是這些新用戶界面的性能和外形，因為它們中很多都需要自定義的硅芯片來滿足用戶界面的尺寸和性能要求[2]。

MEMS技術與元宇宙

Yole Development[3]表示，這些AR和VR需求將在2030年之前推動下一代MEMS器件的發展。什么樣的MEMS器件和技術能讓元宇宙成為現實呢？讓我們先回顧一下計算機界面技術的歷史，再考慮它們在元宇宙中可能的發展方向。

人機交互 (HCI) 始于上世紀60年代的鍵盤，并通過80年代的圖形用戶界面 (GUI) 繼續發展，2000年代又出現了觸控技術。人機交互的下一個時代將以AR和VR為基礎。構建這種類型的AR/VR界面是一項長期且艱巨的任務，根據Meta的說法，未來還需要好幾年的研究[4]。

AR眼鏡將成為情景感知和人工智能驅動界面發展中的關鍵設備。作為界面，AR眼鏡將允許用戶使用已選擇共享的信息、推斷下一步的動作，并在用戶想采取行動時做出反應。多種新興技術的融合將有利于AR眼鏡的發展和應用，相關的新興技術包括神經輸入、手勢追蹤、動作識別、語音識別、計算機視覺，以及基于慣性傳感器的手指點擊和自觸摸檢測等新的輸入技術。通過基于MEMS的慣性傳感器單元和基于執行器的觸覺控制，可以使具有神經運動輸入的腕式設備具備光學傳感和空間定位功能[3]。如果把基于MEMS的PMUTs（壓電微機械超聲換能器）用于基于觸摸的觸覺控制和狀態監測，它就能成為一種進入元宇宙的方法。基于MEMS的麥克風和微型揚聲器將成為提高聲音質量的關鍵，使元宇宙中的360度音頻傳感技術得以實現。

以下是五大元宇宙交互技術的需求及MEMS技術所能提供的解決方案：

元宇宙交互技術的需求

光學與顯示

音頻、高質量聲音

空間定位

交互、觸覺控制

動作識別、狀態監測

MEMS技術解決方案

微鏡（單個/陣列）

麥克風和微型揚聲器

高性能加速計和陀螺儀

觸摸和力傳感器、微型執行器

PMUTs、慣性傳感器

結論

以上例子表明，存在多種潛在的MEMS方案可以滿足元宇宙的技術需求。MEMS產品可用于構建元宇宙所需的高度交互的用戶界面，對于新環境孕育出的新興應用的發展、交付和應用，MEMS產品也將發揮關鍵作用。

參考資料

[1] Benjamin Cook, Director of Hardware R D at Meta, Grand Challenges for MEMS augmented Reality Virtual Reality, MEMS Sensors Executive Congress 2022, October 10-12, San Diego, CA
[2] Edith Beigné, Silicon Research Director at Meta, Technologies for the Metaverse, MEMS World Summit (MWS) China, 2-3 November 2022
[3] https://www.yolegroup.com
[4] Inside Facebook Reality Labs: The next era of human-computer interaction – Tech at Meta

審核編輯 黃宇