疫情期间最适合你的用研方法:远程可用性测试
编辑导语:在新冠疫情肆虐的今天,我们人与人的距离被拉远,原有的生活、工作方式都随之发生改变。传统的用户研究、用户可用性的测试在现在看来充满了危险,那有没有一种新的方法更好的进行用户可用性测试呢?在这篇文章中,作者介绍了远程可用性测试,通过分析对比给我们展现了几种不同的测试方式,适用条件和优缺点,给我们可用性测试、人因测试提供了一种全新的思路。
持续的新冠疫情改变了很多事情。包括我们的生活、社交和工作,一切都变了。
作为设计师,我们是渴望在个人和职业生活中寻求灵感刺激,与他人互动和创造联系的生物。通过亲自观察和对话,我们与用户产生共鸣的能力得到了极大的增强。
尽管官方要求人与人之间要保持 6 英尺的距离,但是新冠疫情使设计师和用户的距离越来越远。
虽然我已经完成了我应该做的的远程用户测试,但我还是更加偏向于面对面的用户测试。由于疫情我不得不重新看待远程用户测试。在几次远程用户测试会议之后,我决定通过这个操作指南与大家分享我的经验。
一、远程可用性测试的 “定义”
远程可用性测试类似于传统的可用性测试,但有一个关键区别:被访者和主持人位于两个不同的空间。被访者在自己的家、办公室或其他地方与设计进行交互,由可用性专家远程采访,而不是专门去到被访者处或邀请被访者来实验室。
远程可用性测试是一种远程研究方法,被访者在自然环境中通过屏幕(或者是语音等等)与产品交互或体验。
二、远程可用性测试的 “使用时间”
这样的远程测试对于预算有限的团队,或测试较远距离的被访者来说是一个很好的选择。退一步来讲,安排一系列远程测试比什么都不做要强得多。
以下是应该考虑远程可用性测试的一些场景:
- 由于被访者时间冲突无法参加面对面的测试
- 被访者到测试地点很远,来回不方便
- 测试团队经济紧张,没有充足的钱来做测试
- 一些软件和设备的访问性将被访者限制在他们自己的环境中
- 时间紧,任务重,招募被访者困难重重
这些就是可以采用远程测试的原因。当然现在新冠疫情也成为一个决定性因素了?
三、远程可用性测试的 “类型”
在了解什么是远程可用性测试以及何时需要它之后,下面来介绍一下远程测试技术的种类。主要有两种类型,每种类型都有其利弊。
1. 非主持型
非主持型远程测试不需要研究人员参加每个测试环节,例如:研究人员不需要每个环节都进行视频或者通话。这就需要通过软件来指导用户,记录他们的行为,并向他们询问预定的后续问题。
2. 主持型
主持型远程测试中研究人员通过屏幕共享软件与被访者进行测试,研究人员通过软件进行说明,观察被访者与产品的交互,并针对该被访者的操作提出后续问题。
3. 远程用户测试类型的快速比较
各种远程用户测试类型的比较
四、 远程可用性测试的 “方式”
我相信你现在对远程可用性测试有了一定的理解。根据我的经验,我总结了一些进行远程测试的方法。接下来我会介绍如何正确的执行测试。
1. 远程测试的准备
作为用户体验设计师,我们的目标是给用户最棒的体验。因此,我们必须要充分准备好远程可用性测试。
首先,必须明确你的目标和目标群体。明确你的目标用户并确产品要测试的功能 。一定要清晰用户目标,并且创建针对用户的任务场景。
接下来就需要招募被访者,这一步需要确保招募的被访者符合你的目标用户。由于测试是远程的,几乎可以招募任何地方的被访者!
被访者主要有以下三种类型:
- 通过社交媒体平台招募的被访者可能有兴趣测试你的产品。
- 从团队长期维护的粉丝群中挑选出被访者。
- 由你的赞助人赞助参加的被访者。
事先了解测试的被访者数量很重要,以免因被访者过少导致结果无效,或因被访者过多而浪费时间和资源。五个被访者就可以测得大多数主要的可用性问题。但是考虑到被访者能否正常到场,我强烈建议至少安排三名额外的被访者来候补。
确定好被访者数量后接下来就是要给被访者发送邀请邮件。发出让被访者心情愉悦的邀请邮件很重要,因此我建议大家制作一个电子邀请函模板,其中应该包含测试的时间(如果是国际被访者需要考虑时差)、测试的注意事项、设备说明和热情的欢迎辞。此模板可以在以后的远程测试中重复使用。
下面提供一个我制作的远程测试的模板。
电子邮件模板
制作这样的模板对某些人来说有些困难,但是能够避免以后测试的许多错误。
人非圣贤孰能无过。
被访者可能会误解、遗忘前提条件或忘记测试流程。一个欢迎辞有助于解决这些问题。欢迎辞没有严格的格式,我会在之后的思维导图中展示。
最后,确保测试使用的POC[1]测试文档可用。我们曾经就发生过测试事故,测试文档出现错误不能正常使用,然后导致整体测试时间推迟,最终没能按时完成工作。我希望大家一定要重视测试文档的检查,最好能进行预测试。
([1]POC:Proof of Concept,即概念验证。通常是企业进行产品选型时或开展外部实施项目前,进行的一种产品或供应商能力验证工作。)
2. 执行远程测试
现在,可以进行远程可用性测试了!
首先,需要遵循远程可用性测试的黄金法则:把一切都记录下来!
因为你永远不知道什么时候需要回顾用户的评论、问题甚至是用户犯的错误。
所以在测试前,请遵循另一个测试的黄金法则:对于非主持型远程测试,需要请求被访者在测试时录制自己;对于主持型远程测试,需要告知被访者你将录制整个测试过程。
要注意远程可用性测试很灵活,我们可以在不同设备上对被访者进行测试。
在整个远程测试过程中,你需要对用户行为、评论、问题和所犯的错误等进行细致的记录。我建议你创建一个笔记的框架。可以将页面分成 4 个板块,并标注上面四个不同部分的重要信息。
远程测试会话不应超过 40 分钟。并且这 40 分钟也应该中间设置休息时间。这会让被访者感到舒适的同时确保测试尽量不受外部因素的干扰(例如被访者的疲劳效应、习惯效应)。
以下是我认为效果最好的时间划分。
3. 结束远程可用性测试
远程可用性测试结束后,需要衷心感谢被访者为此付出的时间。这看起来微不足道,但却有助于让被访者回来参加以后的远程可用性测试 🙂
在远程可用性测试结束后的另一件重要事情是检查录音和录像并记录其中重要的信息。
如果测试设计有重大漏洞,那么你应该进行适当的更改并进行重新测试。(译者建议:在预测试或者第一组测试结束后立刻进行测试的梳理,及时发现错误,这样能节省很多犯错的成本)
如果以上的测试步骤一切顺利,就可以进入下一步:准备远程可用性测试报告。这份报告应清楚地记录用户评论、挫折、错误和建议。应该将长期项目标注出来,根据优先级先来解决急需解决的任务。
可以将这份报告呈现给同事和领导,以得到他们的认可。所以在此之前请确保报告清晰明了。与设计师和开发者分享这些发现尤其重要,因为他们可以将他们的设计与消费者的期望联系起来。
五、执行远程可用性测试的 “原因”
在限制的条件下进行远程可用性测试,总比不做可用性测试强。所以越来越多的团队正在转向远程可用性测试。
- 它通常比面对面测试便宜。
- 与面对面的测试相比,可以对更多的被访者进行测试。
- 通过远程可用性测试,可以深入了解你的产品在不同地方的表现。
- 从远程测试中可以获得更加真实的数据。被访者不是在实验室中而是在自然条件下进行测试,从而消除了霍桑效应(霍桑效应:人们知道自己成为观察对象,而会改变行为的倾向)。
- 无主持的远程可用性测试招募的大量被访者有助于更加自信地得出调查结果。
六、远程可用性测试的 “缺点”
从一开始,我就一直试图为远程可用性测试提供一个范例。尽管它非常适合在现如今的新冠疫情下进行,但是它还是有一些缺点。
- 在远程可用性测试中如果没有主持人在场,被访者可能会中途离开测试地点或三心二意地执行任务。即使被访者在自然环境中进行测试,仍然会存在 观察者效应,被访者即使觉得产品很难用,也可能选择不说出来(观察者效应:主试的一举一动,都会对被访者的反应产生影响 )。
- 主持可用性测试通常很耗时。主持人必须始终在场,以免错过与被访者的互动以及提出后续问题的机会。
- 没有主持人主持的远程测试,其结果很大程度上取决于脚本的清晰程度。
- 在完成非主持型远程可用性测试后,被访者很少或者根本不会提出后续的问题。
- 一些被访者只是为了赚外快而参加测试,可能不会提供有价值的数据和意见。
七、工具
测试工具、测试平台对于每个设计测试的人来说都是一个困难,因为我们都想避免因为工具原因卡主整个测验。幸运的是,现在在应用商店上有几款很棒的远程可用性测试工具。
使用此类工具有几个优点:
- 一些工具本身自带支持使用插件和记录。
- 被访者可以同时共享他们录制自己的视频和录制屏幕的视频。
- 一些工具也允许做笔记。
- 大多数工具都会加密整个对话以保护隐私。
- 被访者可以为录制他们的视频添加自定义背景。
- 某些工具(如 lookback)甚至不需要被访者下载应用程序。
八、 尾声
远程可用性测试允许您以更低的成本更快地测试更多被访者。如果做得正确,它可以成为团队中迭代测试、收集客户反馈和专注于目标用户的秘密武器。
每种用户研究方法都有明显的优点和缺点。了解每种方法的独特品质和局限性,能确保您为用户打造更好产品和体验。
我希望您能吸收和掌握这个操作指南,并结合自己的经验,让它成为最适合您的测试。希望这些能够作为您开始远程可用性测试之旅的起点。让我们一起快乐的进行远程可用性测试吧!
作者:Suman Meena
原文:https://uxdesign.cc/remote-usability-testing-playbook-8edce9c5057d
译者:平文凯;审核:李泽慧、张聿彤;编辑:刘丽
本文由 @三分设 原创发布于人人都是产品经理,未经许可,禁止转载
题图来自 Unsplash,基于 CC0 协议
测试皆可远程,工作皆可远程,远程做方便多了!很受用!
很详细系统化,非常实用,同时具有创新,收藏了以后慢慢看!