有形的手勢:混合現實的體感交互

2 評論 8262 瀏覽 34 收藏 9 分鐘

在這篇文章中,主要介紹了我們是如何專注于研究在混合現實中用肢體與自然手勢進行交互的。

最近我們去了互動17“(交互設計協會,其提供了一個討論交互設計問題的在線論壇),并展示了我們對于手勢輸入的思考?。如果你還沒有看過,你可以查看這里的鏈接?:https://vimeo.com/209794287。要在8分鐘內闡述整個概念是不可能的。所以,我們想在這再分享一下背后的思考與過程。

近年來,混合現實技術已經成為了設計圈的一個流行術語,但是基礎的交互方式仍處于待完善的狀態。我們習慣于使用界面或者控制器來與機器進行交互。然而,例如在使用hololens時,由于它的交互方式的缺乏,我們很難用自然手勢與其進行交互。在這篇文章中,我們將介紹我們是如何專注于研究在混合現實中用肢體與自然手勢進行交互的。

交互方式的缺乏,使人很難用自然手勢交互

肢體交互與本體感受

我們生來1可以在不借助五感的情況下感知到自身的四肢,關節和肌肉。這個叫做本體感受?*。我們覺得應該用本體感受來充當混合現實的輸入方式,用這種方式,我們完全不需要借助外部的硬件,只靠自己的身體來進行交互就可以了。這種方式可以讓人更自然的用肢體進行交互,我們預見其具有相當大的潛力。

使用本體感受的手勢作為手勢交互

無形與有形

長久以來,我們都比較推崇無形設計,設計要保證無形并能輕而易舉的使用。然而,為了接近自然手勢交互。我們認為必須改變交互方式,它必須對于用戶來說足夠明顯并且容易理解。這就要求當我們在設計手勢輸入的時候,需要重新更好地定義交互的空間與順序。下面,我們就將講述一下有形設計。

測試原型以提高其保真度

由于沒有比動手更好的方式去思考和學習了,因此,我們做了幾個原型。并且用他們去向同事測試并根據反饋迅速的改進設計。

探索原型:從單一變量到一組3d變量的控件保真度

1.有形

我們把有形定義為交互邊界的一個明確基準,舉個例子,我們大拇指和食指之前的距離就是一個有形的本體感受交互方式,因為我們明確的知道這個距離能達到的最大值與最小值。這種類型的交互方式對于控制透明度或者其他具有明確上下限屬性的操作來說是完美的。

大拇指和食指之間的距離就是一個有形的本體手勢,因為他有一個明確的交互方式以及作用范圍

將這個手勢賦予給一些具有上下限的連續變化

2.分層級

我們的手指肌肉每天都有不同的訓練量。拇指和食指會比小拇指更常用。因此,我們手指的力量和靈敏度都有一個高低層次,舉個例子,大拇指和食指之間的交互方式會比使用大拇指和小拇指之間的交互方式更好使用并且準確率更高,我們可以利用這種現成的準確率層級體系。例如,拇指和無名指/中指之間的點擊可以用作對象透明度的步驟控制操作。

手指的力量以及敏感度決定了他們的層級劃分

我們還把一些不常用的操作或者一些關鍵操作賦予給了大拇指與小拇指之間的交互,因為這個手勢不常用并且需要費更大的力氣完成。此外,我們還有一個原型,在這個原型中我們設定給常用手一些精密的滾動選擇等操作,并且設定非常用手來作為一些操作的補充,例如激活和關閉。這兩個想法背后的原理是相同的。那就是,我們的肢體交互是分層級的。在設計手勢輸入系統時不妨多思考一些等級的設定。

將一些低保真的步驟操作賦予給一些功能較弱并敏感的手指

3.方向性

我們有兩個原型,一個我們用手腕的方向來控制在三維空間中縮放物體時x,y,z軸的方向。另一個我們讀取兩個手指之間的矢量位置來選擇軸向,兩者的結果都不是很好。本身把手指放置在精確的x,y,z方向上感覺就不是很自然。我們感覺本體手勢在調整交互方式上是很強大,但在空間位置上卻不盡然。對于方向控制,我們還是覺得以下的方式更好:用手的傾斜來調整谷歌地圖。

使用大拇指和食指之間的矢量讀數來控制方向不是很自然

用手的傾斜來控制方向會感覺更自然

肯定有更多的問題

首先,我們肯定還沒解決所有的問題。以下是在這個項目中出現的一些問題,我們想聽到你的思考

  1. 既然本體姿態具備一些象征意義,那我們在交互設計時能不能使用這些象征意義呢?比如撥弄,頷首,或者拉弓動作等
  2. 我們已經知道,有形和無形的手勢適用于執行不同的任務。那如果我們把他們結合起來會怎么樣呢?
  3. 如果我們把這些原理的背景改變一下呢?在自動駕駛汽車上或者數字家庭一體化上又是怎么樣的呢?

注釋:本體感覺是指肌、腱、關節等運動器官本身在不同狀態(運動或靜止)時產生的感覺(例如,人在閉眼時能感知身體各部的位置)。因位置較深,又稱深部感覺。此外,在本體感覺傳導通路中,還傳導皮膚的精細觸覺(如辨別兩點距離和物體的紋理粗細等)。主要涉及軀干和四肢的本體感覺傳導通路(屬于頂葉功能)

 

原文鏈接:https://medium.com/teague-labs/seamful-gestures-a-body-interface-for-mixed-reality-638c8a6968a8

本文由 @百度UXC 翻譯發布于人人都是產品經理。未經許可,禁止轉載。

更多精彩內容,請關注人人都是產品經理微信公眾號或下載App
評論
評論請登錄
  1. 這不是leap motion么??

    來自四川 回復