根據(jù) VR 虛擬實(shí)境資訊網(wǎng)站 UploadVR 報(bào)導(dǎo)，索尼互動(dòng)娛樂(lè)（SIE）近期在一份研究論文中透露了研發(fā)中的新型 VR 控制器技術(shù)成果，可藉由鄰近感測(cè)器來(lái)偵測(cè)使用者每根手指的細(xì)微動(dòng)作，藉以達(dá)成精細(xì)的操作。

 

 

　　這篇論文是 4 月下旬在夏威夷舉辦的「CHI 2020」論壇中發(fā)表，標(biāo)題為「Evaluation of Machine Learning Techniques for Hand Pose Estimation on Handheld Device with Proximity Sensor（在配備鄰近感測(cè)器之手持裝置上應(yīng)用機(jī)器學(xué)習(xí)進(jìn)行手勢(shì)判斷的評(píng)估）」，作者是 SIE 的研究員 Kazuyuki Arimatsu 與 Hideki Mori。

 

 

　　SIE 在論文中介紹了研發(fā)中的新型 VR 控制器原型，該控制器握把上配備有 62 個(gè)表面電容鄰近感測(cè)器，可偵測(cè)手掌指接近握把所造成的電容變化。再透過(guò)光學(xué)追蹤系統(tǒng)同步取得精確手指動(dòng)作的訓(xùn)練數(shù)據(jù)，藉由卷積神經(jīng)網(wǎng)路方法進(jìn)行機(jī)器學(xué)習(xí)，來(lái)獲得一套能單憑表面電容鄰近感測(cè)器數(shù)據(jù)就能精確判斷手指動(dòng)作的系統(tǒng)。

 

※ 光學(xué)追蹤系統(tǒng)只是用來(lái)取得機(jī)器學(xué)習(xí)的訓(xùn)練數(shù)據(jù)，該裝置實(shí)際運(yùn)作時(shí)只使用鄰近感測(cè)器，不使用光學(xué)追蹤系統(tǒng)

 

　　SIE 在影片中示範(fàn)了運(yùn)用此一新型 VR 控制器原型來(lái)進(jìn)行精確 VR 操作，像是用手指拿取與堆疊積木塊，作出各種手勢(shì)等。即便出現(xiàn)手部潮濕或是佩戴戒指之類(lèi)的干擾，依然可以準(zhǔn)確判斷。不過(guò)因?yàn)槭峭高^(guò)偵測(cè)電容變化搭配機(jī)器學(xué)習(xí)模型來(lái) “推估” 手勢(shì)動(dòng)作，因此還是有部分手勢(shì)無(wú)法準(zhǔn)確判斷，例如經(jīng)典的瓦肯舉手禮。

 

　　雖然這些研究成果目前只是實(shí)驗(yàn)室階段，尚未進(jìn)入實(shí)際產(chǎn)品規(guī)劃。不過(guò)只要 SIE 仍持續(xù)在 VR 領(lǐng)域發(fā)展，未來(lái)很有可能會(huì)應(yīng)用在下一代 PlayStation VR 的控制器上。有興趣的玩家不妨可以多多留意後續(xù)的消息。

 

　　附帶一提，雖然目前 Valve 推出的 Valve Index 控制器也有提供類(lèi)似的手指動(dòng)作偵測(cè)功能，但從示範(fàn)影片的成果來(lái)看，SIE 研發(fā)中的這套新型 VR 控制器原型能提供比 Valve Index 控制器更細(xì)微精確的偵測(cè)效果。