來源：映維網(wǎng) 作者 廣州客

隨著虛擬現(xiàn)實和增強現(xiàn)實技術(shù)在視覺保真度和頭顯舒適度方面的穩(wěn)步提升，研究人員正繼續(xù)研究比握持式控制器更為自然的輸入解決方案。

今天，康奈爾大學的一組研究人員介紹了一種基于腕帶的解決方案FingerTrak。所述設備使用熱攝像頭來追蹤手部的三維運動，并從用戶手腕輪廓提取出20個手指關節(jié)的位置。

FingerTrak由康奈爾大學SciFi Lab和威斯康星大學麥迪遜分校的研究人員研發(fā)，其利用一個深層神經(jīng)網(wǎng)絡將三到四個微型熱攝像頭的輸入拼接在一起，從而共同捕捉整個手部的姿態(tài)。利用攝像頭生成的輪廓，主干網(wǎng)絡和回歸網(wǎng)絡估計指尖和關節(jié)的位置。

盡管結(jié)果并不完美，但它們可以用于某些形式的VR和AR輸入。FingerTrak的其他潛在應用包括人機交互與控制、手語翻譯和健康監(jiān)控，包括發(fā)現(xiàn)早期的帕金森氏癥和阿爾茨海默氏癥等退化性疾病。

有趣的是，研究人員表示僅靠手腕輪廓就“足以準確預測整個手部姿態(tài)”。所以，團隊能夠?qū)⒄麄€傳感系統(tǒng)放置到手腕，不需要手套、戒指或其他此前介紹的任何技術(shù)。下面這個視頻演示了FingerTrak將手部運動追蹤轉(zhuǎn)化為一只仿生手的運動，并允許計算機確定用戶何時在寫字，喝咖啡，以及與智能手機交互。

目前尚不清楚系統(tǒng)是否能夠快速追蹤特定的手勢，比如一個人正在寫什么。研究人員指出，取決于測試背景，F(xiàn)ingerTrak在測試期間的平均角度誤差率在6.46到8.06度之間。換句話說，它可能是最好的補充性技術(shù)，而不是完全取代更高精度的手指追蹤解決方案，至少對某些應用而言是這樣。

相關論文：FingerTrak: Continuous 3D Hand Pose Tracking by Deep Learning Hand Silhouettes Captured by Miniature Thermal Cameras on Wrist

手腕型攝像頭可以增強VR頭顯的由內(nèi)向外追蹤攝像頭。原型版本的FingerTrak已經(jīng)非常小，而隨著進一步的工程設計，它可以進一步縮小。它主要依靠非常低分辨率（32×24像素）的熱敏攝像頭，而這種攝像頭的尺寸和厚度都比最薄的蘋果手表還要薄。

原文鏈接：https://yivian.com/news/76466.html