HTC Vive如何意外创造出比行业标准便宜10倍的mocap技术

Source：

2022 May. 20

五年前，当《侠盗一号》获得奥斯卡最佳视觉效果提名时，HTC Vive的团队惊讶地发现，他们是故事的一部分。在英国广播公司(BBC)的一部纪录片中，来自工业光魔(Industrial Light & Magic)特效团队的一名成员展示了他们如何使用实时虚拟现实摄像机探索想象中的环境，然后在其中进行拍摄。这个摄像头采用了iPad的形式，背面有一个Vive控制器。

台湾智能手机公司宏达电(HTC)和视频游戏开发商维尔福(Valve)在一年前发布了这款虚拟现实头盔，这对虚拟现实头盔的开发商来说是一个冲击，但它为这项刚刚开始扎根的技术开启了全新的潜力这是一种成本效益高的动作捕捉技术，可能会彻底改变故事的讲述方式。过去一年，随着虚拟制作在大流行期间增加，这种潜力比以往任何时候都更加突出。

初始HTC万岁耳机被释放时,追踪器内只存在一对控制器用来跟踪手的动作,但该公司快速的释放HTC万岁跟踪器,无线追踪装置,可以附加到任何对象,模拟其在虚拟环境中运动。从那以后，虽然其他VR公司也发布了自己的追踪器，但Vive仍然是行业标准，最近还显示出作为工作室使用的动作捕捉技术的廉价版本的新潜力。

2021年3月，该公司发布了第三版Vive跟踪器生态系统，以及Vive面部跟踪器。现在，任何想要尝试动作捕捉电影制作的人都有了一套新的选择。

据HTC Vive高级总监沈晔(音)说，Vive追踪器的发布并没有具体的实际需求。他们让业界自行解决问题。“我们不知道人们会用它做什么，”叶说。“我们认为人们可能会带上一把虚拟的枪或剑。”叶在拳击手套上试了试，把他的刺拳输入到虚拟现实中。相反，动作捕捉的潜力很快生根发芽。Ye说道:“我们并没有想到开发者会跑来跟我们说，‘嘿，我觉得你可以用它来进行全身追踪。

但回过头来看，这是非常合理的:追踪器可以安装在手、脚和腰部，以充分概括人类的动作范围。“只要你有一台有足够插座的电脑，你拥有多少追踪器是没有限制的，”叶说。

HTC Vive是在房间两侧的两个小盒形“基站”的基础上运行的，每个基站都包含一个旋转激光器。只要一个人在该空间内佩戴跟踪器，跟踪器的全部运动就会被拾取。渐渐地，开发商开始进行修补。

虚拟现实游戏工作室CloudGate studio在2018年发布的《孤岛359》中使用了追踪器，在该游戏中，玩家不仅可以射击恐龙，还可以用脚上的追踪器踢它们。开发者Croteam在《Serious Sam VR》中使用Vive追踪器尝试了一把真正的迷你枪。总部位于英国的图像工作室iKinema开发了一款名为Orion的复杂动作捕捉软件，该软件由Vive Controllers提供支持，可以将各种肢体动作导入虚拟现实。该公司于2019年被苹果收购。

然而，迄今为止，Vive追踪器最令人印象深刻的使用来自另一个意想不到的地方——霹雳舞战斗。今年早些时候，随着疫情继续对表演艺术界人士造成破坏性影响，虚拟现实社交平台VRchat上开始出现舞蹈战斗，经验丰富的舞者穿上Vive tracker，与来自世界各地的人进行公共舞蹈战斗。

这最终导致了国际舞蹈协会(International Dance Association)的诞生，这是虚拟现实领域的第一个舞蹈社区。“像这样的事情让我非常兴奋，我们可以用这项技术为社会做些什么，”叶说，“用超越相机的真实社会互动连接世界。”这是人们开始忽视的真正的肢体语言。”

还有电影制作方面的事情。渐渐地，制作工作室开始利用虚拟制作技术在虚拟现实中预先可视化场景。2017年，史蒂芬•斯皮尔伯格在制作《头号玩家》前评估虚拟场景时，使用了Vive耳机。现在，追踪器可以连接到摄像机上，将它们的动作转化为3D引擎(通常是Unreal引擎，它最初是为游戏开发的)。如果演员佩戴追踪器，他们的动作也会转化为3D空间。

位于波兰的商业制作公司Blackfish Studio一直在尝试使用Vive追踪器。在为支付服务公司GoPay制作动画广告时，该公司使用Vive跟踪器捕捉动作场景中演员的更戏剧化角度。

这是一种更简单、更方便用户使用的动作捕捉方法，而不是通常在电影拍摄中使用的复杂技术。因为传统的动作捕捉系统非常昂贵，人们开始意识到一个普通的游戏PC和面向消费者的VR硬件可以让你花几千美元做一些事情，而一个大型动作捕捉舞台需要几十万美元，”叶说。“这比普通的动作捕捉工作室便宜50倍。”

好吧，没那么快:“重要的是要知道，他们以两种不同的质量做两种不同的事情，”本·格罗斯曼(Ben Grossmann)说。他是Magnopus的首席执行官，也是一名虚拟制作主管，曾出演过《狮子王》(The Lion King)等影片。“传统的动作捕捉技术可以捕捉大范围、多对象，更适合可靠性和精度的生产水平。目前，Vive跟踪更适合小区域、单人、低精度和质量——而不是电影质量所期望的细节水平。”

换句话说，不要指望詹姆斯·卡梅隆(James Cameron)会关闭他在新西兰拍摄《阿凡达》(Avatar)续集的动作捕捉基地，而选择几个消费级的Vive追踪器。但不可否认的是，对于那些负担不起好莱坞级特效的创新型故事讲述者来说，这项技术具有潜力。格罗斯曼说:“我确实相信Vive追踪是一种可行的低成本替代方案，可以让低成本的电影制作人做出伟大的事情。”“它们是专业解决方案的补充，在某些情况下甚至在专业场景中占有一席之地。”

对使用Vive追踪器的动作捕捉叙事成本结构进行更现实的评估后发现，该技术的成本略低于行业标准的10倍。带有Vive追踪器的全身追踪售价2100美元，而传统的外置动作捕捉售价23000美元。但正如叶所指出的，使用Vive追踪器可能会对电影的预算产生更广泛的影响，包括使用临时演员。“实际上，你可以让一个人表演所有的电影临时演员，”他说。“你只需要一次记录一个身体动作。”

这是一项艰巨的工作，但它为那些负担不起大量观众的电影制作人提供了创新的空间。与此同时，随着Vive今年推出的面部追踪器的发布，其追踪硬件继续变得更加复杂。“随着计算机变得越来越便宜，这些技术最终将被越来越多的人使用，”叶说。根据Vive目前的应用情况，廉价的电影制作将会利用Vive追踪器的潜力，这只是时间问题，但这项技术已经在这里了。

青瞳视觉编译，其目的是为了将更好的内容分享给更多人，版权依旧归原作者所有。若有涉及侵权请予以告知，我们会尽快在24小时内删除相关内容，谢谢。