虛擬交互的觸覺反應，讓使用者在虛擬環境中進行交互時能夠感受到仿真的觸覺反饋。本文講述相關內容，希望對你有幫助。

很可能在我們有意識的心理生活中，感官的相互作用是構成觸覺的原因。也許觸覺并不只是肌膚與實物的接觸，而且還是頭腦中儲存的生命力 —— 麥克盧漢《理解媒介》

一、虛擬交互中缺少的觸覺反饋

在上一篇《瀏覽器中復刻 visionOS 交互 ｜ 鍵盤》中，我們在瀏覽器中復現了裸手與虛擬鍵盤直接交互的設計，通過食指關節射線觸發 Hover Effect 作為鍵盤按鍵的視覺引導。在實際體驗過程中，最影響輸入效率和體驗的，其實是因為缺少實體鍵盤（按鍵）應有的觸覺反饋，導致每一次按鍵的動作無法獲得及時、明確的反饋。

根據人機交互中的信息加工理論（Information Processing Theory），在與界面交互的過程中，用戶和機器之間會不斷進行信息的雙向處理，及時有效的反饋可以幫助用戶確認操作是否正確、明確當前狀態、增強操作滿足感，以及維持交互連貫性等。反之，缺少必要的反饋信息將打破這一循環，影響用戶效率和體驗。

現有的交互方案

在裸手交互場景中，由于沒有實體外設的輔助，觸覺反饋必然是缺失的，為了彌補這一缺失，最直接的方法就是利用視覺、聽覺信息作為輔助，盡可能為用戶提供及時有效的反饋。例如 Meta Quest 中，按鍵成功會輔助以聲音 ??反饋：

不過這種解決方案更像是手機從實體按鍵過渡到觸屏按鍵時，為了彌補觸摸屏所欠缺的段落感和紋理起伏而設計的視、聽效果反饋（也包括振動反饋，只不過是整個手機的振動）。

在虛擬交互中，觸覺反饋的缺失更重要的是手和虛擬界面間缺少實體的阻擋，用戶往往會穿過模型而不自知。尤其是在虛實結合的場景下，這種虛實物體呈現出來的視覺沖突是影響沉浸體驗的罪魁禍首之一，不論你的模型渲染的有多么真實，用戶的大腦都會瞬間「出戲」。

針對這一問題我相信即便是 Apple Vision Pro 也沒有辦法提供完美的解決方案（在不提供額外輔助設備的前提下），因此在蘋果官方設計規范里，對于直接交互的場景是非?？酥频模?/p>

Prefer indirect gestures.An indirect gesture tends to be easy for people to make because they don’t have to move their hands to a specific location. Reserve direct gestures for when you want to invite people to manipulate a nearby virtual object.

翻譯：首選間接手勢。間接手勢往往很容易做出，因為他們不必將手移動到特定位置。直接手勢適用于需要邀請用戶操作附近虛擬對象的情況。

在這些場景中使用直接交互（Direct Interaction/Touch）

二、偽觸覺反饋（Pseudo-Haptic Feedback）

當然蘋果的設計規范并沒有解決虛實交互過程中觸覺缺失的問題，為了真正解決這一問題，方法可以大致分為兩大類，一是通過可穿戴設備（如手套、手環、指環等）或外置設備，提供真實的物理刺激（力、溫度、紋理、硬度、超聲波）等，具體可以參考下面這篇論文綜述：

這里舉一個例子，Meta Reality Labs 的研究團隊嘗試讓用戶在虛擬鍵盤輸入的過程中，通過手套、腕帶為用戶提供真實的振感反饋，結果顯而易見，基于手指的振動反饋可以帶來更高的用戶滿意度、輸入效率以及更低的認知負荷（mental demand）；同時研究結果也證明，集中在腕帶部位的振動反饋也能帶來幾乎類似的效果。

這其實是一個更面向市場化用戶需求的研究，大部分用戶不太可能接受時刻需要額外戴上一雙手套來使用 XR 設備，但是對于腕帶（或者集成到智能手表的表帶），是普通消費者已經完全能夠接受的。

虛擬鍵盤輸入

穿戴式觸覺反饋設備

另一類方法稱為偽觸覺反饋（Pseudo Haptic Feedback）技術，它通過視覺和聽覺等其他感官模擬出觸覺感受，而不需要實際的物理接觸或力反饋設備。正如文章開頭所引用的描述：

觸覺并不只是肌膚與實物的接觸…感官的相互作用是構成觸覺的原因

我們的大腦經歷了現實生活經驗的訓練，知道觸覺不僅僅來自皮膚的感受，它總是與視覺、聽覺等其他感覺信息相伴而生。例如，按壓不同的鍵盤會產生不同的聲音反饋；用手推動物體時，要么手被物體阻隔無法向前，要么物體會隨手的動作一起移動。

下面這篇研究中，研究人員設計了四種不同的偽觸覺反饋效果，并組合呈現給用戶體驗，以評估不同的反饋方式對虛擬交互體驗的作用。結果顯示不同的視覺反饋效果都可以有效誘發「觸幻覺」（Haptic illusion）。

三、總結

Apple Vision Pro 采用眼手協同交互替代傳統 VR 設備的手柄控制器，觸覺反饋的缺失在特定的虛實結合交互場景必然會打破用戶的連貫性交互和沉浸感。為了解決這一問題：

• 一方面在交互設計時除非必要應盡量克制直接的虛實交互；
• 另一方面充分利用視覺、聽覺線索「欺騙」用戶大腦以產生偽觸覺反饋效果。

此外可以預見的是，蘋果必將充分利用其「全家桶」等生態優勢，將 Apple Watch 作為交互控制、反饋的輔助設備無縫納入到 Vision Pro 的場景交互里。