來(lái)源：新浪VR

隨著VR和AR在視覺精準(zhǔn)度和頭顯舒適度上的不斷進(jìn)步，研究人員一直在努力尋找比手持控制器更加自然的輸入方案。近日，康奈爾大學(xué)和威斯康星大學(xué)麥迪遜分校的工程師們已經(jīng)開發(fā)出一種新的可穿戴系統(tǒng)—Fingertrak，該系統(tǒng)配有四個(gè)熱敏攝像頭，可以敏銳地以3D方式預(yù)測(cè)20個(gè)手指關(guān)節(jié)的位置。

FingerTrak是在康奈爾大學(xué)SciFi實(shí)驗(yàn)室以及威斯康星大學(xué)麥迪遜分校的研究人員的共同協(xié)助下開發(fā)的，該設(shè)備在手鐲上安裝了三至四個(gè)熱敏攝像頭，以便共同捕獲手姿勢(shì)。每個(gè)熱像儀都會(huì)跟蹤你的手每個(gè)部分的運(yùn)動(dòng)，將每個(gè)圖像實(shí)時(shí)劃分為單個(gè)縫合的熱圖像，隨后設(shè)備將數(shù)據(jù)傳輸?shù)竭B接到Raspberry Pi驅(qū)動(dòng)的網(wǎng)絡(luò)設(shè)備。通過(guò)計(jì)算機(jī)運(yùn)行深度學(xué)習(xí)模型，該模型可以預(yù)測(cè)20個(gè)手指關(guān)節(jié)的位置。盡管成果并不算完美，但FingerTrak可以用于某些形式的VR和AR輸入。FingerTrak的其他潛在應(yīng)用包括人機(jī)交互與控制、手語(yǔ)翻譯和健康監(jiān)控，包括發(fā)現(xiàn)早期的帕金森氏癥和阿爾茨海默氏癥等退化性疾病。

研究人員表示該設(shè)備僅靠手腕輪廓就可以“準(zhǔn)確預(yù)測(cè)整個(gè)手部形態(tài)”。該設(shè)備將整個(gè)傳感系統(tǒng)放在手腕上，因次不需要手套、戒指或是先前發(fā)布的任何技術(shù)。在公布的視頻中還演示了FingerTrak是如何將手部運(yùn)動(dòng)追蹤轉(zhuǎn)化為一只仿生手的運(yùn)動(dòng)，并允許計(jì)算機(jī)確定用戶何時(shí)在寫作、喝咖啡以及使用智能手機(jī)的。

目前尚不清楚該系統(tǒng)是否可以快速追蹤特定手勢(shì)，比如用戶正在寫的是什么。研究人員指出，F(xiàn)ingerTrak在測(cè)試期間，根據(jù)測(cè)試背景的不同，平均角度誤差率在6.46-8.06度之間。也就是說(shuō)，對(duì)于某些應(yīng)用而言，這可能是最好的補(bǔ)充性技術(shù)，而非完全取代更高精度手指追蹤方案。

手腕攝像頭可以增強(qiáng)VR頭顯的由內(nèi)向外追蹤攝像頭。原版的FingerTrak已經(jīng)非常小了，但隨著加工設(shè)計(jì)，它還可以再小一點(diǎn)。系統(tǒng)主要依賴低分辨率（32x24像素）熱敏攝像頭，這種攝像頭的尺寸和厚度比最薄的蘋果手表還要薄。

FingerTrak將于9月中旬在2020ACM國(guó)際UBICOMP大會(huì)上首次亮相。

新浪VR編譯