混合现实视频为何是宣传 VR 游戏的明智方法
很少有游戏开发人员不希望自己的创意成为热门游戏。虽然虚拟现实 (VR) 游戏世界可能尚未进入关键的轰动时刻，但在这一新兴（至少现在是）市场，VR 硬件所有者纷纷涌入开展激烈的竞争，只为分得一杯羹。
在 Steam 商城快速搜索，搜索结果显示超过 2000 种 PC VR 应用和游戏（大部分自 2016 年起开始推出）。在这种情况下，你一定希望自己的 VR 游戏不被忽略，并快速吸引潜在玩家的眼球。混合现实视频可以帮助实现这一目标。
图 1.HTC Vive* 在 2016 年的视频中所展示的绿屏混合现实。
VR 游戏的绿屏混合现实视频是一种 2D 视频制作技巧，为观众提供游戏世界中的第三人称玩家视角。使用此处介绍的软硬件堆栈，视频创建者可以记录或流传输沉浸在虚拟环境中玩家的现场游戏过程，观赏体验不再局限于第一人称头显视角。每一位 VR 开发人员都应该尝试一下这种技术。
“哇，太酷了！”几乎每一个人都这样说。
HTC 和 Valve* 在 2016 年初发布的 Vive 演示 视频中率先使用混合现实展示 VR，而且 Owlchemy Labs 的Job Simulator和 Northway Games 的Fantastic Contraption预告片都采用了这项技术，效果非常好。Croteam 的 Serious Sam开发人员也提倡采用这项技术，他们不仅在 2016 年 EXG 的早期演示中使用，还在所有 VR 游戏中实施了专有混合现实视频工具。
英特尔® 开发人员关系事业部的 Josh Bancroft 和 Jerry Makare 一年多来一直合作采用这项技术，在 2017 年 GDC、台北电脑展、E3 游戏展，以及最近的纽约英特尔假日展示会中都部署了现场演示。对他们来说，使用混合现实视频在 VR 领域脱颖而出是轻而易举的事。一听到现场的反应 —主要是上述副标题的变化 — 他们就知道混合现实有着第一人称视角无可比拟的优势，为没有佩戴头显的观众带来令人叹服的 VR 体验感。
图 2：英特尔团队在 2017 年台北电脑展上的现场绿屏混合现实演示，题为 Rick and Morty: Virtual Rick-ality。
“VR 混合现实视频最大的优势是，可以让大家看到 VR 体验中的感觉到底如何，”Josh 说。“如果你作为第三方观看第一人称 VR 视频，会有一些你并没意识到的事情让你分心 — 当你处于 VR 情景之中，大脑缓和了你的头部移动，但如果你以第三人视角观看 VR，会出现很大的跳跃造成干扰。”第三人称混合现实视角巧妙地消除了这些干扰。
分享即是关心
对于许多游戏玩家来说，与朋友分享他们的体验是一件很自然的事，无论他们是在线玩家、本地多玩家，还是电视前的观众。使用 VR 时，玩家封闭在 VR 头显内，画面中只有第一人称视角，这样更难和其他人一起体验。混合现实可以改变这一点。
“使用第三人称视角可以提高社交性，使它更多地成为一种共享体验，”Jerry 说。"人们可以看到环境，知道你所反应的对象，进而产生各种好玩的事情，就像喜欢对司机指手画脚的人，他们提示你怎么玩游戏。”
图 3.2016 HTC Vive* 视频展示混合现实如何提高 VR 的社交性。
“目前 VR 市场竞争激烈，很难让自己脱颖而出，”Josh 说。“这是一个全新的领域，每个人都跃跃欲试，但没有人真正理解其中的奥秘、知道成功的秘诀，所以这其中有大把的机会。”使游戏支持混合现实技术可以帮助开发人员把握机会。
首先，相比标准第一人称视角，它支持创建包含完全沉浸于游戏体验的预告片、视频和现场演示。然后，可以在活动上使用这些预告片和视频展示游戏。Josh 表示：“使用第三人称混合现实视角可帮助你吸引更多的人观看预告片和购买游戏。”
第二，使游戏支持混合现实让内容创建者、流传输工作人员和 YouTube 视频创建者有机会为你的游戏创建混合现实视频。YouTube 视频创建者，包括 Get Good Gaming和 DashieGames，在他们的视频中使用混合现实，达到了预期的效果。正如有关 DashieGames 视频的热评所述：“我可以好几个小时一直观看这类游戏，丝毫不会感到厌烦。”
图 4：YouTube 视频制作者 Get Good Gaming 身穿角斗士服装使用混合现实技术玩 VR 角斗士题材游戏 Gorn。
许多开发人员已经开始实现旨在帮助流传输工作人员和内容创建者的功能，例如优化 Twitch* 流传输和集成观众交互工具。说到 VR 游戏，混合现实支持必须处于列表中较高的位置。Northway Games 在 Fantastic Contraption中构建了一整套 content-creator 功能，包括混合现实支持。他们希望将其用在自己的流媒体中，但更重要的是，他们希望玩家也这样使用，从而达到以完美的内容吸引更多观众的目标。
图 5.Northway Games 的一种现场混合现实流媒体，标题为 VR 游戏 Fantastic Contraption。
“流传输工作者、YouTube 视频制作者和内容创建者在构建集成方面有很大的增长潜力，在游戏中添加混合现实支持刚好与这种增长相匹配，” Josh 说。“如果你证明自己的游戏能让流传输工作者和内容创造者为观众制作令人惊叹的混合现实视频，这将会为你的成功提供巨大的帮助。”
郑重承诺
过去几年，独立开发商 Croteam 一直履行着将 VR 融入所有最新游戏的使命，包括四款 Serious Sam游戏和 The Talos Principle。其核心是创新者，他们将不可避免地探索各种混合现实的可能性，从而推动 VR 领域的发展。“所有看起来非常炫酷的视频都采用了混合现实技术，所以这似乎是向人们解释 VR 体验的最好方法，” Croteam 资深程序员兼内部混合现实专家 Goran Adrinek 说。
他们曾获得机会在英国举办的 EGX 2016 上展示Serious Sam VR: The Last Hope*，有了展示混合现实能力的机会。Goran 表示：“我们计划通过实施某种实时混合现实，这样在展台上的我们会看起来很酷，还要捕捉一些宣传视频，展示物理迷你炮机枪控制器。”
图 6.Croteam 的绿屏混合现实技术成功展示 Serious Sam* 迷你炮机枪。
从籍籍无名到一炮而红
但是他们面临一个问题：距离展会只有两周的时间，但游戏仍然无法支持混合现实。“那时我们仅仅了解混合现实是什么，我们试图像其他人一样: 渲染可以在开放直播软件中混合的游戏的几个画面，”Goran 说。
但他们是完美主义者，对结果不满意，所以决定在专有 Serious Engine 中构建自己的混合现实工具，在过去 20 年的大部分时间，他们一直在对该引擎进行更新迭代。他们选择将整个混合现实过程融入到引擎之中，包括捕捉现场视频，并在游戏中实时合成。
这一大胆的举动最终有所回报。“我们及时赶上了 EGX 2016，而且效果很好，”Goran 说。“观看别人在混合现实中玩游戏比观看第一人称视频要好得多，你可以看到它在展区里引起了很大的关注。”
图 7.Croteam 在 EGX 2016 现场展示的 Serious Sam VR: The Last Hope* 绿屏混合现实演示。
主场优势
除了只需一种软件（VR 游戏）来管理整个过程的优势，在游戏中创建混合现实视频还有增强效果的优势，因为他们将生成的玩家图像融入了游戏引擎。
将引擎中的所有内容进行编码，从视频捕捉和虚拟游戏第三人称摄像头，到绿屏色度键与合成，显然这些任务非常繁重，但看起来并没有难倒 Croteam。“很难说到底需要做多少工作，但也没有那么多，因为我们没有太多的时间，”Goran 说。
对 Croteam 来说，及时参加 EGX 只是支持混合现实的开端。“EGX 结束后，我们继续开发混合现实，直到解决所有困扰我们的问题，比如相机校准、控制器延迟和摄像头移动场景，”Goran 说。“最终，我们开发出了每个人都能轻松掌握的设置向导，它能帮助轻松完成设置。”
图 8：Croteam 的所有 VR 游戏都包含混合现实设置向导。
他们还准备了更多，以便继续磨练技术和工具。“我们使用深度信息开展了一些试验，以便将玩家图像融入游戏时获得更好的视觉效果，这种尝试非常不错，”他说。“我们希望将来能够继续发展这种做法。”
混合差异
Croteam 和 Josh 与 Jerry 的想法一致，也看到了混合现实支持在展区和预告片之外的显著优势。Goran 表示：“它还能帮助玩家轻松地制作直接从游戏中捕捉的视频，并将视频传输或上传至 Twitch 或 YouTube* 等在线服务。我们希望有更多的玩家制作的材料，作为最直接的成果在网上宣传在游戏中支持混合现实是多么简单。”
尽管 EGX 举办的前两周取得了巨大成功，但 Goran 不希望让一切听起来太容易。他说：“无论是在后期制作中进行混合，还是投资可简化整个过程的技术，都是一项巨大的工作。"但最终，一切投资都是值得的。Goran 继续说：“每个人都可以使用这种方法和工具，即使是最基本的形式，也能产生巨大的效果。”
Croteam 将整个混合现实的实施过程写在博客中，是每个希望了解这项技术的基本读物。
超越游戏
并不只有游戏开发商才能从创新混合现实应用中获益。乔希强调的另一个领域是房地产。Google 快速搜索显示，虚拟房产演练已经非常普及，支持潜在买家从自己舒适的家里或房地产经纪人的办公室参观房产。Josh 建议：“如果更进一步，可以生成房地产经纪人带领他们参观房产的混合现实视图。还可以给他们提供混合现实视频，他们可以通过视频看自己的参观路线，这样他们会更加喜欢。”
图 9.CNN Money* 以题为 "Virtual reality is the new open house” 的文章报道 VR 在房地产领域的使用。
从他作为视频创作者的角度来看，Jerry 设想混合现实可以作为视觉故事叙述的强大工具，可能与风靡伦敦、纽约和其他地方的沉浸式剧场体验相关。“人们都将有机会打造丰富、巧妙地 VR 混合现实体验，”Jerry 说。“这一切都是为了丰富社会环境，拓展范围，以便人们更好地了解事情的进展并相互分享体验。
随即而来的是 2017 年 6 月发布的 Spider-Man: Homecoming - Virtual Reality Experience游戏，Josh 希望看到更多的商业品牌打造 VR 和混合现实体验来作为营销工具。“想象一下，你可以在电影院或主题公园中设置一个环境，把自己插入到你最喜欢的电影或游戏体验中，和钢铁侠一起闲逛或者和蜘蛛侠一起荡秋千，”Josh 说。“不仅可以在 VR 头显中获得 VR 体验，还能借助混合现实，制作关于自己的 VR 体验视频，与人分享。”
图 10：Sony Pictures Entertainment 发布的 The Spider-Man: Homecoming - Virtual Reality Experience* 预告片。
果断采取行动
但是，开始将我们与超级英雄面对面的混合现实视频发布到社交媒体之前，在游戏世界中有更多的工作要做，混合现实的视频还需要开发人员发挥更多的创意。
其中有一个创意进展令 Josh 印象深刻，就是 2016 年东京游戏展上的 Circle of Saviors* VR 游戏现场演示。比赛中玩家用一把巨大的剑砍龙，需要进入一种稳定的的怀疑暂停状态。为了完成这一效果，一个完全角色扮演（包括身披红斗篷）的玩家进行绿屏演示，最终合成的混合现实视频显示身处角色中的玩家完全沉浸在游戏世界中。
“太不可思议了！”Josh 说。“开发人员看到了混合现实的强大能力，并意识到可以用它来完成一些与众不同的事情，以创造性的眼光审视之前完全不可能的新方向。”
图 11.2016 年东京游戏展上角色扮演玩家以混合现实的方式展示 Circle of Saviors。
而且这是关键 — 无论是否佩戴头显，都可以看到 VR 中可能发生的事情。目前混合现实视频很好地向观众传达了“这可能是你”的概念，而且 VR 开发人员认为自己以及自己的游戏有必要看看它可以做什么。
“使用混合现实展示完全沉浸在 3D 世界中的玩家是我们用 2D 媒体宣传 VR 游戏的最佳选择，”Croteam 说。“一定要试试。”
虽然确实存在技术挑战，但并非不可逾越，Croteam 和其他人证明了这一点。此外，还会有越来越多的资源可以提供帮助。“并不像看起来那么难，而且很奇怪会上瘾，”Josh 说。
“一旦你能够携带相机进入 VR 并展示第三人称视角的虚拟世界，它将激发你作为开发人员的创造力，你一定会开始想如何炫酷地发挥自己的创造力，”Josh 继续说。“绝对值得！”
未来计划提供更多关于 VR 混合现实技术的故事、教程、案例研究和其他相关材料。随时了解最新信息，请加入英特尔®开发人员计划：https://software.intel.com/gamedev。