索尼互動娛樂(SIE)的研究人員最近推出了一款運動控制器原型，該控制器展示了使用機器學習和電容傳感器進行全手跟蹤的實驗技術。

　　像Leap Motion這樣的基于視覺的手部跟蹤系統非常適合在不使用運動控制器之類的物體時追蹤手部，但在使用控制器通常會遮擋手指的移動。

　　為了讓VR運動控制器具有更好的手感，SIE研究人員Kazuyuki Arimatsu和Hideki Mori著手構建了一個原型控制器，該控制器集成了許多如Valve Index控制手柄那樣的電容式接近傳感器。

　　原型包含62個電極，這些電極記錄了許多不同的手的大小和姿勢的訓練數據集。與Index控制器一樣，Sony的原型采用了帶有腕帶的開放式手掌設計。

　　論文指出：“我們引入了2.5D表示法，將卷積神經網絡方法應用于曲面的電容圖像，并基于計算機視覺領域的最新成果對兩種類型的網絡架構進行了評估，我們還使用該原型實現了實時交互應用程序，并演示了在VR應用程序中使用手指進行直觀交互的可能性。”

　　但是Arimatsu和Mori也承認，他們的設計目前存在一些缺陷，即缺乏對所有不同大小手部的支持。

　　“如果我們將該方案交付給全球用戶，這可能會造成問題。由于我們需要光學跟蹤系統來記錄訓練數據集，因此無法使用我們當前的訓練方法實際根據用戶的使用情況微調訓練。為了更好地適應各種手型，需要研究一種用于增強或合成電容圖像的方法。”

　　當前的算法無法估算用戶手部的形狀(例如手指的粗細)，這會在執行諸如捏等動作之類的操作時在實際手部姿勢和虛擬手部姿勢之間造成差距。用戶當然可以在拾取較小的虛擬物品時進行自我調整，盡管對于Knuckles以及原始的Oculus Touch控制器來說，這確實是正確的。Oculus Touch控制器是首個具有相對較小的電容傳感器陣列的主流VR控制器。

　　無論是通過Sony內置的PC解決方案還是打算與PS5配合使用控制器，Sony都將繼續朝著商業化的方向發展。我們仍在屏息等待下一代PSVR的發布，希望Sony至少能夠淘汰老化的PS Move和PS Camera光學組合。

　　來源：roadtovr