资讯|可透视的动作捕捉追踪技术
2018/6/26 17:21:06 宁波中科院创客空间

     一些异性与人类的电影目前是占据了大多数荧屏，特别是好莱坞的电影，像《猩球崛起》、《阿凡达》、《加勒比海盗》等等全球热映的电影。要做到电影中那些动物或者怪物能像正常演员一样的眼神动作，在最初出现这类画面的时候观众们肯定会非常惊讶，这是怎么做到的？经过这么多年，就现在看来这些并不稀奇，运用动作捕捉技术及后期电脑合成，栩栩如生毫无违和感的异人类就出现在了荧幕上。

     深入到拍摄现场，画面是这样的。

    

     穿着紧身衣，贴满追踪小贴片

    

     近看脸，都是各种捕捉小点

     就目前的技术，只有穿着紧身衣，才能比较精准的捕捉到演员的肢体动作，为后期动画合成的逼真程度做好前期准备。

     还有大家并不陌生的kinect技术，很多时候受周边干扰比较大，使对人物动作的追踪捕捉并不是非常精确。

    

     于是，随着增强现实技术日益火红，一种新的计算机视觉系统即将面世。

     它结合了深度数据和关于身体姿势如何形成和它能做什么的智能假设。其产生的结果是一种X线视觉，可以揭示一个人衣服底下的身体的形状和位置，即使是在像跳舞这样的快速动作中，该系统也能实时运作。

     这改善了目前技术的受人体衣服、背包等附属品对动作捕捉追踪带来的极大干扰。

     据介绍，系统采用DynamicFusion(动态融合)和BodyFusion(身体融合)相结合的方法。第一种方法使用单摄像头深度数据来判断身体的姿势，但不适合处理快速的移动或者遮挡;第二种方法使用骨架来判断姿态，但同样在快速运动时失去方向。研究人员将这两种方法结合成“DoubleFusion”(双重融合)，本质上是从深度数据中创造出一种似是而非的骨架，然后在离核心适当的距离内用皮肤“包裹”骨架。

    

     如上图所示，来自摄像头的深度数据与人的一些基本参考图像结合在一起，产生了一个骨架，并跟踪了身体的关节和端部。

     最右边则是三种方法DynamicFusion(b)，BodyFusion(c)和DoubleFusion(d)分别产生的效果图。

    

     不管是连帽衫、耳机还是宽松的衣服，都无法阻挡DoubleFusion的“全视之眼”看穿一切。

     当然，目前该方法存在一个不足：

     如果被追踪人员穿了很多衣服，它往往会过度估量人员身材大小——没有简单的方法来判断一个人的体形是否很宽，或者他们是否只是穿着一件厚实的毛衣。当人员与一个独立的物体(比如一张桌子或游戏控制器)进行互动时，它就不能很好地运作了——它可能会试图把物体解读为肢体的奇怪延伸。研究团队已将处理这些异常情况纳入未来的研究范畴。

     发布的论文最后总结道，“通过DoubleFusion双重融合技术，用户将第一次能够轻松地将自己数字化。”

    

    

    http://weixin.100md.com
返回 宁波中科院创客空间 返回首页 返回百拇医药