5月14日消息，索尼軟件工程師的一份報告顯示，該公司正在開發一種高度沉浸式虛擬現實運動系統，該系統很可能會在其下一代PlayStation控制器中使用。

　　索尼互動娛樂事業部的一個團隊在一篇名為“帶有接近傳感器的手持設備上的手勢估計的機器學習技術評估”的論文中說，他們已經開發出一種控制器，該控制器可以精確地復制玩家手和手指的動作。

　　手指跟蹤應用程序通常依賴于捕獲手指運動的相機，例如Oculus Quest。最近，提供更精確運動識別的電容式接近傳感器進入市場，但是，正如索尼研究人員有松和幸（Kazuyuki Arimatsu）和森樹秀樹（Hideki Mori）所指出的那樣，由于物理控制器的存在阻礙了攝像機的檢測，而仍處于起步階段的接近傳感器技術需要改進和完善，準確捕捉手的動作仍然難以捉摸。

　　Arimatsu和More承擔了填補這些空白的挑戰，他們構建了具有62個嵌入式電極的原型手控制器，并使用光學監控系統記錄了訓練數據集。他們捕獲了12位對象的手的動作，每個對象的手的大小各不相同。

　　Arimatsu and More說：“我們的目標是擴大手指跟蹤功能的界限，以便在虛擬空間中使用手進行更直觀的交互。我們的方法不僅可以檢測手指在特定電極上的觸摸，還可以利用所有傳感器的值預測3D空間中手指的全面運動。為實現這一目標，我們評估了在計算機視覺領域研究的兩種卷積神經網絡架構，用于姿勢估計，并說明了控制器上傳感器的合適架構。”

　　為了獲得逼真的和身臨其境的3D體驗，研究人員在上個月發布的一份報告中說，我們應用了多維表示法，根據卷積神經網絡的最新成就，將卷積神經網絡方法應用于曲面的電容圖像和兩種類型的網絡體系結構上，我們使用數據集評估了計算機視覺領域。我們還使用該原型實現了實時交互應用程序，并演示了在VR應用程序中使用手指進行直觀交互的可能性。”

　　原型視頻顯示了用戶的手及其數字表示，這些手勢做出了各種手勢，例如打開和關閉、計數、拇指旋轉、展開手指、和平標志以及伸出的拇指和小指（表示電話），它可以識別一個手握住控制器設備和起吊或投擲的物體。

　　去年，索尼為VR控制器許可了高級觸覺器，他們將能夠模擬推動、拉動、抓握和搏動的感覺，下一個索尼控制器很可能會允許游戲玩家不僅看到他們的手，而且感覺與他們互動的各種物體。

　　該團隊表示，這項技術可以應用于游戲以外的領域，例如非語言交流應用。