研发:最佳实践之VR游戏测试的技巧与教训

内容速读:

Schell Games自2002年以来一直在开发教育和娱乐游戏,并为VR社区带来了诸如《I Expect You To Die》和《Until You Fall》等优秀作品。今天,这家工作室的产品管理总监亚历克西斯·米勒和制作人泰娜·阮将向我们介绍团队在2D和VR游戏测试方面积累的经验和见解。下面分享的技巧是Schell Games团队过去和现在所积累的智慧成果。玩家如何访问游戏的技术计划。玩家签署或同意公司保密协议的方式。

映维网 2020年07月15日)Schell Games自2002年以来一直在开发教育和娱乐游戏,并为VR社区带来了诸如《I Expect You To Die》和《Until You Fall》等优秀作品。今天,这家工作室的产品管理总监亚历克西斯·米勒(Alexis Miller)和制作人泰娜·阮(Tera Nguyen)将向我们介绍团队在2D和VR游戏测试方面积累的经验和见解。

另外,如果对这个主题感兴趣,你可以参阅Oculus有与Schell Games合作编写的Oculus Playtesting Guide。

下面是映维网对亚历克西斯·米勒和泰娜·阮分享的整理:

研发:最佳实践之VR游戏测试的技巧与教训

我们在过去数年间进行了大量的现场监管游戏测试,而最近我们发现远程无监管游戏测试和远程实时(视频)游戏测试同样取得了成功。下面分享的技巧是Schell Games团队过去和现在所积累的智慧成果。每种方法都涉及不同的规划和利弊,但都可以提供有价值的反馈。

1. 所有方法

测试的所有方法都遵循:

  1. 寻找和安排测试人员的招聘计划。
  2. 玩家如何访问游戏的技术计划。
  3. 玩家签署或同意公司保密协议的方式。
  4. 一份检查表和/或脚本,其中包括有关特定设备和系统的信息,支持游戏测试人员熟悉设备并分享反馈的方法,以及数据收集计划。

通过一系列问题(事先预备)询问玩家的游戏经验非常重要。尽管临场构思问题可能有所裨益,但不要临场构思所有的问题。

玩家在设置过程中的惊喜和挫折越少,体验和反馈就越好。

1.1 现场监管

如果是前往我们的办公室或其他地点,玩家需要有时你不以为然但却十分重要的大量细节。这将帮助玩家获得更好的体验。细节包括:

  1. 停车地点和/或附近有什么公共交通工具。
  2. 什么时候到,什么时候完成。
  3. 是否需要在前台或保安室登记。
  4. 是否有酬劳,酬劳又是多少。
  5. 是否会提供食物(我们总是询问是否存在过敏的食物)。

我们从自己的营销电邮列表,工作室的朋友和家人,以及与我们公司有关系的当地高中、学院或大学招聘测试人员。

1.2 远程无人监管

对于无监管远程游戏测试,我们最近开始使用平台UserTesting。UserTesting记录测试人员的PC、平板电脑或智能手机屏幕。通过这个平台,我们可以接触到美国、加拿大和世界其他国家的近200万人(并不是所有人都拥有虚拟现实设备)。要在这个平台进行测试,你需要预先完成一系列测试前的规划工作,但我们可以在将来的测试中重复利用测试问题和任务,不必花费时间单独地调整每个测试,从而节省时间。

首先,我们在UserTesting启动一个招募测试以寻找拥有合适硬件(如Oculus Quest)的测试人员。玩家可以在UserTesting平台演示将Quest画面投屏到手机或PC的能力。这个10到15分钟的测试不需要下载我们的游戏。这是一种从技术角度确保游戏测试顺利进行的方法,因为我们没有亲自在现场帮助他们。在招募期间,测试者可以选择提供电子邮件地址。这将用于后续的游戏测试,因为测试者可以通过我们的Oculus Playtest Release Channel访问我们的游戏。

为了允许测试者访问我们正在开发的游戏,我们在Oculus Dashboard创建了一个Playtest Release Channel,并在每次启动远程无监管测试时添加测试人员的电子邮件地址。

在无监管游戏测试中,我们通过书面指示引导测试人员完成每个步骤。有一些重要的,对于无监管的远程会话,我们需要提供基本但重要的提示。下面是建议:

  1. 开始测试前,确保头显和控制器已充满电。
  2. 如果是将Quest投屏到手机,出于隐私考虑,建议提醒玩家关闭推送通知。
  3. 把Quest音量调大,从而确保UserTesting可以记录游戏中的音频。

我们希望确保一个多元化的测试群组,所以收集测试人员的统计数据,并询问与无障碍相关的问题十分有用。我们最近开始询问玩家哪只手是主导手(或者术语双手灵巧型),以及是否存在残疾或无障碍需求。

如果给出正确的说明和常见的故障排除提示,大多数玩家都能够投屏Quest。以下是我们向测试人员提出的建议:

  1. 确保头显和手机蓝牙已打开。
  2. 确保用相同的账号/邮件地址登录Oculus应用程序和头显。
  3. 确保头显和手机使用相同的WiFi网络。

对于这种测试模式,当玩家在游戏时自言自语能够提供重要的数据见解,所以我们在测试开始时会提醒他们在执行任务时说话。

最后,因为玩家是通过手机或PC阅读测试说明,所以我们会在用户穿戴头显前先设置好测试所需的所有信息。测试人员只需要在游戏后回答问题即可,所以不需要频繁地戴上摘下头显并反复来回手机或PC。除了会令玩家感到不适外,这种行为会造成投屏断开,并导致UserTesting平台的其他技术问题。另外,这同时可以提供一种更为真实的游戏体验,无需中断游戏进程。

1.3 远程有人监管(实时)

对于远程有人监管(实时)测试,我们安排了多个30分钟到1小时的实时会话,并通过视频会议或UserTesting平台与测试人员共同进行。我们的设计师充当管理者,指导测试人员提供如何设置投屏和如何下载游戏。当测试人员遇到技术困难或陷入困境,沮丧或不确定如何在游戏中前进时,管理者同样会提供帮助。在这种实况会话中,设计师可以向测试人员询问开放式的问题,如“你认为接下来应该做什么?”或“你为什么要进行x,y,z交互?”。

当产品处于早期开发阶段并且需要额外的指导或提示时,远程有人监管测试特别有用。类似地,它有助于测试可能需要花费大量时间或技巧的后期关卡或游戏部分。

为了确保测试人员拥有现场测试所需的一切,我们对无人监管测试采取类似的协议,但不同的是,管理者会大声地阅读包含指示的脚本,而非测试人员通过PC或手机读指示。

能够与测试人员沟通,并同时听到和看到其游戏非常关键。所以,我们通常在现场测试的前10分钟里帮助测试人员设置投屏方法和视频/音频。我们经历过的最成功方法是,测试人员将虚拟现实视图投屏到智能手机的Oculus应用程序,并同时通过视频会议与我们分享。

另一个简单的选择是要求测试人员非公开地将游戏流式传输到Facebook页面。但如果你的游戏尚未发布,你或许不会考虑这个选项。尽管相关页面提供了一个“Private”设置,但用户非常容易忽略这个设置,并因而公开你的游戏画面。

2. 促进测试

这里是我们积累的经验技巧,包括有助于我们获得可操作见解的过程和策略。

2.1 现场监管

  1. 尽量限制房间内的人数,并宣布新人于何时进入房间,因为VR测试人员不知道有多少人在附近观看,这会令人感到非常不舒服。
  2. 在测试人士的视线内清洁VR头显。这是建立融洽关系和信任的另一种方式。
  3. 尽量限制开发者的谈话,尤其是当它不是直接指向测试人员的时候。
  4. 建立一个独立的,包含软地板的大型测试空间,这样测试者就会知道自己是在一个安全的测试空间里。
  5. 向测试者展示头显和控制器,并提供调整束带的建议。
  6. 当询问问题时,请耐心等待其回答,给予测试者足够的时间思考和回应。令人惊讶的是,测试者会会变得更加健谈。
  7. 获得更多信息的一个好方法是:“你能再说多一点吗?”
  8. 如果一位玩家陷入了需要干预的地步,不要只给答案。尽量复刻玩家的思维过程,并帮助其自行寻找解决方案。例如:“假设你有注意到左边第二个面板上的奇怪标记。”
  9. 提醒测试者,“没有正确或错误的答案,所有的反馈都有所帮助”,即使其感到沮丧或困惑。
  10. 向玩家演示如何使用Oculus Home按钮校准屏幕。
  11. 确保测试者设置了适当的防护边界。在我们的例子中,我们开发了一款就坐式游戏,而且它不同于Quest的固定边界。

2.2 远程无人监管

  1. 这种方法的一个优点是,玩家在家里用自己的头显进行测试,从而感到自然放松。
  2. 因为问题必须事先打印出来并由玩家阅读,所以请确保问题尽可能开放,因为只有一次机会。避免“是”或“否”的问题。这通常无法提供足够的信息。

2.3 合适的问题

  1. 你多久玩一次游戏?你最喜欢的游戏是什么?(这个问题可以帮助确定测试者的经验和风格类型)
  2. 你有没有感到身体方面或其他方面的不适?(这个问题可以帮助确定是否出现身体不适,解释身体类型,并揭示内容(多样性、代表性等)的问题)
  3. 你最喜欢的部分是什么?
  4. 你最不喜欢的部分是什么?
  5. 最令人沮丧的是什么?
  6. 你什么时候觉得自己最聪明?(这对益智游戏特别有用)
  7. 你认为我们在和别人一起测试之前应该先改变什么?
  8. 如果你有一根可以添加,改变,或删除任何一切的魔杖,你会做什么?
  9. 你会如何向你的朋友描述这个游戏?(这个问题对于确保满足设计目标非常有用。对于市场营销来说,听听玩家用来描述游戏的词汇大有脾益。)

3. 数据分析/后期游戏测试

下面我们来看看用来分析测试结果的过程,工具和数据点。

3.1 远程无人监控

我们使用的平台为每个游戏测试创建一个录制视频,以及测试者对问题的书面回复。它同时提供了关于每名玩家的统计信息,包括年龄、性别、职业、家庭收入、喜欢的游戏类型、以及是否拥有孩子。它同时允许我们创建简短的视频片段,并用标签突出显示,以便团队中的其他人更容易查看视频的相关部分。例如,当使用一个类似#playerdies(玩家死亡)的标签时,你很容易搜索到于与玩家死亡相关的所有部分,并分析任何模式或惊喜。

剪辑和标签包含时间戳,所以我们可以测量玩家执行特定动作所需的时间,如完成教程或成功通关。

3.2 所有测试

我们正在努力建立一个管道,并使用Unity Analytis接收和分析结果。这个平台承诺提供游戏中最常见或最不常见的玩家体验数据,比如玩家死亡的最常见原因。我们预先创建目标行为范围,并使数据落在范围之内。一旦我们有足够的数据进行回顾分析,我们就可以改变游戏并观察结果。

4. 进一步学习

即使游戏尚未完备,都不要害怕过早进行测试。大多数开发者发现从原型和未完成关卡中获得玩家的见解十分有价值。它可以帮助提醒玩家游戏尚未结束。

尽早做好准备,在过程中加入游戏测试,为团队成员分配时间准备测试、招募人员、调整测试、分析反馈,当然,不能放松对游戏的调整优化。这通常比预期要长,但完全值得。

原文链接:https://yivian.com/https://i1.yomuzu.com/news/76339.html

相关推荐

暴风测试9月17日来临,《余烬风暴》史诗之战一触即发

由龙图游戏自主研发的中世纪魔幻MMO手游《余烬风暴》新一轮暴风测试9月17日正式来临!精美画面,端游品质震撼体验《余烬风暴》一经面世就斩获CGDA最佳游戏3D美术设计大奖,宏大的世界观故事及端游级的画质表现,向玩家展示了一个沉浸感极强的魔幻大世界。伙伴培养,个性坐骑萌宠相随《余烬风暴》游戏中...

海信社交电视正式上线云游戏 支持边玩边聊

而海信通过应用自主研发的“流媒体低延时处理技术”,使得海信社交电视的刷新帧率达到60Hz,这个数据代表着云游戏可以达到本地游戏一样的体验效果,用户在海信社交电视上玩云游戏可以达到电脑主机游戏一样的流畅体验。作为电视产品的新形态,海信社交电视一经上市便大获好评,荣膺IF产品设计、年度最佳大屏电视等国内...

一片真香!天美宝可梦在“电竞弱国”日本俘获众多玩家

天美宝可梦在“电竞弱国”日本俘获众多玩家。11月30日,在谷歌公布的Google Play Best of 2021中,《宝可梦大集结》在游戏项目中脱颖而出获得“年度最佳游戏”。而在素有“游戏界奥斯卡”的TGA,它也被提名了今年的最佳手机游戏。这款由腾讯天美工作室群和宝可梦公司合作研发的游戏《宝可梦...

LCK最佳阵容引发热议,网友:ICU打野能进三阵就离谱

这其中争议最大的就是T1的“ICU打野”Cuzz竟然能进第三阵,不少网友表示这就很离谱,在他们看来,T1常规赛很多比赛都是Cuzz在拖后腿。另外在大多数网友的心中,鬼皇的表现也配不上最佳阵容的二阵,要说DWG是最大赢家的话,那么Showmaker就是队伍中的最大赢家,他还获得了常规赛的最佳年轻选手和...

从渣渣辉到谢霆锋,揭秘贪玩的传奇套路

《传奇》衍生新印记作为贪玩游戏平台代理游戏之一,《贪玩蓝月》源自恺英网络研发的《蓝月传奇》。为了更加精准地给自家产品投放广告,贪玩游戏平台给《蓝月传奇》打上“贪玩”的印记,之前的“贪玩传世”、“贪玩赤月”等亦是如此。不过归根结底,《贪玩蓝月》的主要游戏背景还是来自于经典游戏《传奇》,相比之下,虽然有...

王者荣耀:打野获得额外60双抗可能引发的问题,天美就没有想到

所以打野的调整是非常迫切需要的,而天美对此的调整就是打野刀的修改,只要出了打野刀,那么在进入自家的野区之后,那么就会获得60双抗,也就是增加了不错的防御力,出了野区就失效,这个看似简单直接的改动,却可能会引发一系列的问题,这个改动放在前期的话,那么就大幅度增加了反野的难度,我们都知道反野是不错的一种...

研发成本超6亿,除了TapTap,心动如何布局其游戏业务?

心动公司,堪称游戏行业内的“网红公司”。虽然最近几年缺少爆款,但由于运营着目前最火热的手游社区TapTap,以及近期B站和阿里的相继投资,心动公司在业内可以说是非常具有存在感。对此,游戏日报研究院正式发布心动公司专题研究报告,以下为本报告的摘要部分,完整版报告可私信或留言给游戏日报。在心动公司202...

研发投入已达1亿美元的《原神》,为何开服后评分仅5.2

先看下大部分pc玩家对这款游戏的看法,开服仅两天在taptap上的评分就已经掉到了5.2分了。1亿美元在美术方面投入多少不得而知...

研发7年、转手2次、被迫关服,网易能复活得了这款游戏吗?

《全面战争:竞技场》早在2013年的GDC游戏开发者大会上,就被SEGA世嘉公布。2017年再次开启封闭测试,2018年初全面公测,结果2018年末游戏代理到期,Wargaming方面并未续签,《全面战争:竞技场》只好宣布关服。2019年2月正式关服,同年8月的 China Joy 游戏展上,网易宣...

从研发到发布,一路被骂的“原神”,为何开服就爆火?

从研发到发布,一路被骂的“原神”,为何开服就爆火?

「帮研发找发行」6款主打画风的游戏

上一期游戏陀螺推出「帮研发找发行」后反响热烈,给我们注入了继续搜罗精品的动力,本期公布的研发项目多具有讨喜或强烈的画风。以下为本期精选的项目,共5款: 《妖怪正传》续作:70人打造水墨风山海经卡牌一、团队介绍:公司成立于2015年,拥有70人的团队规模,成员大多拥有10年以上行业经验,做过多款知名产...

三年研发195种食谱,国外玩家自制的《塞尔达传说》食谱发售了

最近,一位名为Aimee的国外玩家发售了自己耗时三年研究的《塞尔达传说》非官方食谱。起初,她只是想将《塞尔达传说:荒野之息》中的菜式还原到现实中,后来随着研究的深入,Aimee开始通过《塞尔达传说》全系列为灵感扩展菜谱,并萌生了出书的想法。这本几百页的食谱,不仅含有你在《塞尔达传说:荒野之息》中你熟...

「帮研发找发行」9款产品公开,包含模拟、冒险、卡牌等

以下为本期精选的项目,共9款:成都玄星网络科技有限公司一、成立时间:2016年12月二、团队规模:深圳团队17人,成都团队18人三、团队介绍:团队核心成员来自盛大、腾讯、网易等国内顶尖游戏研发公司,从事手游研发10年以上,主攻方向是卡牌,二次元和商战类产品,公司目前在深圳和成都都有团队,总共60余人...

网易研发20年仅成功3款,如何做到匹敌腾讯?这个杀手锏腾讯没有

在国内,网易算得上数一数二的游戏厂商,和腾讯一起被网友看做是国内游戏行业的两大巨头。网易在2019年也是潜心研发,力求能够再打造一款足以称之为现象级的游戏。虽然没有2019年没有爆款产出,但网易的强大却又是毋庸置疑的,仅用几款“看家大作”就撑住了场面,成为国内少数的能与腾讯匹敌的游戏公司之一。在20...

网易研发能力国内第一?做23年游戏仅两款成功,一款就能养活公司

在国内来看,腾讯、网易应该是国内比较成功的几家游戏商之一,自研能力也是数一数二的了,外加上资金雄厚,所以在研发游戏上算是比较频繁的,这是很多小厂商做不到的。其中网易更加是凭着几款“看家大作”,成为了国内少数能够与腾讯抗衡的游戏公司之一。当然,网易也不是一直吃着《梦幻西游》端游的老本,从2015年的《...

盒子游戏,游戏玩家专属个性阅读社区


©CopyRight 2010- 2020 BOXUU.COM Inc All Rights Reserved

鄂公网安备 35020302000061号- 鄂ICP备2020015574号-1