有位開發者將Hololens加入了動作捕捉技術,這個或成為未來VR設備的一個新的潮流。
動作捕捉技術在視覺特效行業內運用普遍,但是動作捕捉專家、開發者Jasper Brekelmans的新項目旨在為動作捕獲帶來現場的AR視頻,使即時觀看疊加于現實場景中的舞蹈表演成為可能。
電影和電視中的視覺特效目前使用動作捕捉技術,這是一個數字化記錄演員動作的過程,在整個行業內廣泛使用。
但是Jasper Brekelmans正在用微軟的增強現實頭盔HoloLen做實驗,使導演和演員能觀看實時疊加在現實場景上的數字化表演。
Brekelmans曾經利用HoloLens以及Autodesk熱門的MotionBuilder動畫軟件來建立AR整合。
而如今他正在與一個叫The WholoDance project的團隊合作,后者致力于數字化地去捕捉舞蹈藝術動作,這既是為了文化也是出于研究目的。
Brekelmans 還與Motek Entertainment進行合作,其中Motek Entertainment提供動作捕捉技術和設備。
Brekelmans則嘗試能夠建立一種無線傳輸動作捕捉數據的方式,使數據在產生后能被無線傳輸至HoloLens上。
然后HoloLens將產生一位AR的虛擬人物來模擬舞者的動作,使之疊放于現實場景上。
對Brekelmans來說,這是對他之前研究的一次進步。
他曾運用這項技術將臺式電腦上Autodesk的MotionBuilder中的數據傳輸至HoloLens。
HoloLens在動作捕捉階段就能將真人大小的3D形象進行即時可視化。
Brekelmans 說,“當我們給舞者展示HoloLens時,他們立馬被吸引住了。之后他們馬上開始分析自己的表演,就像專業運動員運用類似分析設備一樣。與利用2D屏幕展示相比,當利用真人大小的3D人物展示時,平衡過程中的臀部運動或者是舞蹈步法之類的細節就會變得非常顯著和清晰�!�
用戶可以利用Xbox控制器實現各類控制功能,如在物理空間內讓3D人物發生位移,或是切換不同的視覺效果以及調整視覺參數。
根據必要的控制功能數量,該團隊選擇了一個“已知設備”,而不是依靠HoloLens上普遍使用的注視、手勢和聲控功能。
Brekelmans說,“盡管HoloLens是為放映全息圖像專門設計的,但我們和穿戴該設備的表演者一起做了實驗。
這個設備能讓他們看到有圖像疊加在他們手上和腳上。這種展示技術目前對這個用途還不理想,但它為我們提供了可實驗的東西,使我們對未來產生了新的想法�!�
那么這項試驗性技術將如何在未來引領風潮呢?
“我們很希望能在其他設備上使用,包括那種連接臺式機、利用到高端GPU性能的設備。
同時還希望在視覺特效場景下使用這項技術,在演播室內甚至是在外景區將3D人物和擴展部分等可視化�!�