文本輸入是我們數字生活的重要組成要素。一直以來，我們都依賴于物理鍵盤來實現所述操作，但對于理想的沉浸式現實而言，文本輸入的未來可能不會出現物理鍵盤。

所以，如何實現自然而精確的文本輸入是社區正在不斷探索的領域。在日前公布的“Techniques For Multi-Finger Typing In Mixed-Reality（用于多指鍵入的技術）”中，微軟提出了自己的構思方案，其希望通過精確的追蹤和映射來為用戶提供高效的文本輸入。

微軟指出，在一些實施例中，混合現實系統使用一個或多個全息圖呈現混合現實環境。混合現實系統然后可以以全息圖的形式在混合現實環境中呈現一個輸入接收器（虛擬鍵盤）。所述輸入接收器包括多個輸入元件（虛擬按鍵），所述輸入元件（虛擬按鍵）配置成根據單個致動器（手指）的輸入狀態，以及各個致動器（手指）到不同輸入元件（虛擬按鍵）的映射，選擇性地接收來自輸入控制器（手部）的多個單獨致動器（手指）的輸入。

在一些實施例中，為了防止致動器（手指）和輸入元件（虛擬按鍵）之間的意外交互，可以在活動狀態和非活動狀態之間各個致動器（手指）的輸入狀態。當致動器（手指）的輸入激活時，致動器（手指）的輸入映射為活動狀態。相反，當致動器（手指）處于非活動狀態時，禁止向輸入接收器的輸入元件（虛擬按鍵）提供用戶輸入。

上圖4A-4E說明了與用戶手部相關聯的多個姿勢，并且上述的任何一個都可以識別成致動器（手指）輸入狀態的觸發姿勢。

顯然，要精確識別手指文本輸入操作及對應的映射，微軟的方案需要非常強大的計算機視覺能力。