HoloLens利用动作捕捉教你来跳舞

2024-12-20上海AR开发专家

• 
   动作捕捉技术在视觉特效行业内运用普遍，但是动作捕捉专家、开发者Jasper Brekelmans的新项目旨在为动作捕获带来现场的
  AR视频
  ，使即时观看叠加于现实场景中的舞蹈表演成为可能。
  电影和电视中的视觉特效目前使用动作捕捉技术，这是一个数字化记录演员动作的过程，在整个行业内广泛使用。但是Jasper Brekelmans正在用微软的
  增强现实
  头盔HoloLen做实验，使导演和演员能观看实时叠加在现实场景上的数字化表演。
  Brekelmans曾经利用
  HoloLens
  以及Autodesk热门的MotionBuilder动画软件来建立AR整合。而如今他正在与一个叫The WholoDance project的团队合作，后者致力于数字化地去捕捉舞蹈艺术动作，这既是为了文化也是出于研究目的。
  Brekelmans 还与Motek Entertainment进行合作，其中Motek Entertainment提供动作捕捉技术和设备，Brekelmans则尝试能够建立一种无线传输动作捕捉数据的方式，使数据在产生后能被无线传输至HoloLens上，然后HoloLens将产生一位AR的虚拟人物来模拟舞者的动作，使之叠放于现实场景上。
  对Brekelmans来说，这是对他之前研究的一次进步。他曾运用这项技术将台式电脑上Autodesk的MotionBuilder中的数据传输至HoloLens，HoloLens在动作捕捉阶段就能将真人大小的3D形象进行即时可视化。
  Brekelmans 说，“当我们给舞者展示HoloLens时，他们立马被吸引住了。之后他们马上开始分析自己的表演，就像专业运动员运用类似分析设备一样。与利用2D屏幕展示相比，当利用真人大小的3D人物展示时，平衡过程中的臀部运动或者是舞蹈步法之类的细节就会变得非常显著和清晰。”
  用户可以利用Xbox控制器实现各类控制功能，如在物理空间内让3D人物发生位移，或是切换不同的视觉效果以及调整视觉参数。根据必要的控制功能数量，该团队选择了一个“已知设备”，而不是依靠HoloLens上普遍使用的注视、手势和声控功能。
  Brekelmans 说，“尽管HoloLens是为放映全息图像专门设计的，但我们和穿戴该设备的表演者一起做了实验。这个设备能让他们看到有图像叠加在他们手上和脚上。这种展示技术目前对这个用途还不理想，但它为我们提供了可实验的东西，使我们对未来产生了新的想法。”