与网络可用性测试相关的五个常见的流言

我可能不一定能说服你相信这些流言是不真实的。不管怎样,我支持你把在线可用性测试作为你用户体验设计和研究努力的一个部分。这样做,你将会发现它的优点和局限性。

我很喜欢《流言终结者》这个电视节目,因为我认为他所面临的挑战就是真实。在节目中,用一种令人愉快的和科学的方法来对人们普遍认同的留言进行测试。在节目中我最喜欢的部分,当然除了爆炸的部分,是我所信仰的被证明是不真实的。这一直让我开放思想,专注于现实。我也喜欢另一个方面——揭露还没有建立起来的流言。这就是我这篇文章的视角。特别地,我将突出有关与网络可用性测试的五个常见的流言,同时解释为什么我认为这些流言是不真实的。

 写这篇文章的动机是帮助用户体验研究生人员在线可用性测试时打开思想。已经有很多研究人员使用这种方法许多年,而且很有用(在某些情况下)。其他人则是刚开始接触,并希望了解更多的关于它的优势和局限性的信息。最后,一些用户体验研究人员已经形成了关于在线可用性测试的一些观点,并认为不是对各种各样的原因(没有形成的)都有用。我希望通过我揭露这些流言,作为用户研究团体的我们能够根据真实的功绩来评估这个工具。

 1、有大量的干扰因素影响数据的可信赖度

 可能大部分关于在线可用性测试的的流言是数据都不是很可信的。一些人认为这些参与者不会很努力,在参与调研时也是心烦意乱,会尽可能快的完成调研以获得相应的激励,或者虚假陈述他们调研的质量(目的就是获得奖励)。这的确是事实,大体上在所有的案子中占到5%-10%。但是,这已经是一个好消息了。

 这儿有一些很好的技术来清除这些数据。鉴别(和移除)“精神骗子”并不难。这些人的行为是可以预测的。“扁平化”是指一些人的答案都是1或5,在5个等级量表中。“速度检测”是一种检测这些人(看问题6在这幅图下)的方法,确保他们确实认真阅读了每一个问题。一致性检验可以用重复词语的问题,并来分析一致性的回答。移除不切实际的任务时间也是很容易的,并能帮助处理那些在任务中间周末回家的参与者。同时,筛选问题可以写信给那些欺骗性最小的参加调研的参与者(那些伪装自己的人)。

归根结底,在线可用性测试的数据能够和传统的实验室测试一样可靠。唯一的不同就是在跳到分析阶段以前需求做一些清理。

2.你只需要收集数据

当人们告诉我在线可用性测试只适用与收集基本的数据:比如任务的成功、完成时间、满意度等时,我一直感到惊奇。因为某些原因,人们认为这只是因为你有一个大样本量,你只能收集定量数据。网络可用性研究是没有意义的,如果你想要收集关于用户体验的定性数据,。这些不能远离事实。

在线可用性测试的好处之一就是研究人员可以收集大量的关于用户体验的定量和定性数据。举个例子,如果用户对特殊的任务有困难,他们可以提供注解,说明他们为什会在这些任务上有困难,或者他们希望在交易时有困难的地方出现什么。定性数据,经常是详细的评论,能够在他们体验的任何一个环节收集。当用户展示某些行为时,他们甚至可以提示提供一些详细的评论,比如中途放弃交易或者偏离了导航行为。

详细的评论不仅很容易收集,而且很容易分析。现在有很多可利用的方法来选出来描摹这些详细的评论。在详细的回答中,词组群(见下文)是一种能得到快速反应的关键模型的方式。

3.在线可用性测试在设计阶段不能取得好的功效

大部分人认为在运行在线可用性测试只适用于产品建立好以后。这样的在线可用性研究只是总结性评估的一个部分,同时并不适合与实际设计阶段。在线可用性测试并不能指导设计,要么花费太多的时间,要么花销太大在设计阶段。这些并不切合实际。

在线可用性测试能在几个小时内建立起来,也能够很快的收集数据。我们已经能在一天内建立、发布并分析来自在线可用性测试的数据。不仅能够快速的建立,而且能够帮助回答在设计阶段发生的问题。例如:关于导航方式、标签、外观和感受的参数选择的问题。还有一些其他设计参数选择问题不能在小样本两中得到真实的回答。有时候,为了确认重大的设计方案,我们需要快速地从成千上万的用户中收集数据。

4.它只适用与网站

研究人员认为在线可用性测试只适用与网站评估。而不能用于软件,语音应答系统、手机、家用电器和烤箱。虽然大量的在线可用性测试专注于网站,但是没有必要。

多年来,我们用在线可用性测试方法并不局限于网站交互界面的评估。从理论上来说,这仍然是相同的方法。参与者会被提问一些问题,给予一些任务,提供一些关于他们真实体验的反馈。唯一的不同是不能跟踪参与这的行为。但是,可以收集大量的关于他们体验的数据,比如:他们是否能顺利的完成他们的任务,花费了他们多长时间,他们对这个体验有什么感受,或者他们有什么困难。因此,即使你可能放弃了一些行为数据,仍然有大量的他们的体验可以研究。

5.在线可用性测试花销太大

一些人说他们希望做很多在线可用行测试,但是经常性的使用会比较昂贵。这个确实昂贵,但是很幸运,在最近几年有各种各样的工具可以使用,使得在线可用性测试不再需要花费大量的经费。有大量的自我服务供应商,允许你建立并进行在线可用性研究。你只需要付费给他们的技术。请访问www.measuringux.com看一下供应商一览表。

如果预算确实比较紧张,可以用一些打折的在线可用行测试方法,或者基本上是免费的。利用一些在线测量工具(比如调查Gizmo或者调查猴子),一些HTML和JAVA脚本,你可以逐一的建立你自己的几乎免费的在线用户研究(请看下面图作为一个例子,是本土的方法)。而当你没有预算来进行在线可用性研究时,在这种情况下放弃一些数据和功能是必要的。请访问www.measuringux.com ,你能看到更多详细的关于怎么创建一个打折的在线可用性测试的说明。

自己试一试

我可能不一定能说服你相信这些流言是不真实的。不管怎样,我支持你把在线可用性测试作为你用户体验设计和研究努力的一个部分。这样做,你将会发现它的优点和局限性。毕竟,每一种用户研究方法都有它自己的优缺点,在线可用性测试也不例外。

编辑注:如果对这个课题感兴趣,Bill最近撰写了《超越可用性实验室:指导更大规模的在线用户体验研究》

时间: 2024-09-01 19:03:45

与网络可用性测试相关的五个常见的流言的相关文章

用户体验研究:在线可用性测试的思想

我很喜欢<流言终结者>这个电视节目,因为我认为他所面临的挑战就是真实.在节目中,用一种令人愉快的和科学的方法来对人们普遍认同的留言进行测试.在节目中我最喜欢的部分,当然除了爆炸的部分,是我所信仰的被证明是不真实的.这一直让我开放思想,专注于现实.我也喜欢另一个方面--揭露还没有建立起来的流言.这就是我这篇文章的视角.特别地,我将突出有关与网络可用性测试的五个常见的流言,同时解释为什么我认为这些流言是不真实的. 写这篇文章的动机是帮助用户体验研究人员在线可用性测试时打开思想.已经有很多研究人员使

我从可用性测试中学到的五件事

我喜欢做可用性测试. 没有比把假设放在用户面前来测试更有效的方法了.你不仅可以在开发环境之外看你的工作,还可以从用户那里得到很多创新的想法,因为他们每天都在用这个系统. 这件事你必须尽快安排,但是让人吃惊的是很多开发者并没有这样做.他们应该少花点时间开发,多花点时间和用户交流.也就是说,他们更应该走出去. 我还学会了如何获取更有效的反馈.如果专注于特定的模式,那么你可以提高自己发现隐藏观点的能力. 最好在环境上下文中进行测试 我第一次参与的几个可用性测试就是市场人员喜欢做的:主持人坐一边,另外五

一个你绝对不知道的移动可用性测试

  在移动设备上进行可用性测试是大多用户体验设计团队既关注又头疼的部分,市面上的各种专业测试工具各有利弊,如何抉择是一道难题.性能好.对用户干扰少.录制质量高.能记录用户面部表情和手部操作.价格便宜等要素成为大家在选择工具与方法时重点关心的内容.本文作者Colman Walsh提供了一种讨巧的方式,能较好的解决测试中大部分问题.尽管不完美(无法记录用户与移动设备屏幕互动),依旧值得一试,有精力的同学可以结合Lookback(https://lookback.io),或许能捣鼓出一套更完善的解决方

可用性测试的那些事

可用性测试是指通过对典型用户实施测试来对产品或服务做出评价.在一次典型的测试中,用户要完成一系列典型任务.与此同时,观察者会在一旁观察.倾听.做笔记.可用性测试的目的就是为了发现可用性问题,收集定性和定量的数据,并评估用户对产品的满意度. 可用性测试的好处 可用性测试有助于设计和研发团队在产品成型之前发现问题.问题发现和修正的越早,从工时和对日程的潜在影响来看,修正的代价就越小.可用性测试可以帮助你: 1.了解参与者能否顺利完成特定任务 2.了解完成特定任务的时间 3.了解参与者对网站和其他产品

可用性测试的权衡之道

对于可用性测试,业内人士存在一些普遍认可的原则.它们神圣地如同自然科学里的理论,似乎我们只能对其言听计从.俯首称臣才能践行出"好的可用性测试".其实,即便是科学,它的一个特征也是"可证伪性"--理论的正确性总是存在前提条件的.真理再向前一步就成为谬误! 可用性测试中的原则同样如此,需要根据目的.资源.环境的不同,灵活把握.权衡取舍,而非一味恪守某一个或某几个原则,也许这才是可用性从业人员经验重要性的体现. 一.任务设置:精细 VS 宽泛 制定的任务过于精细,一般原则

可用性测试的原则:合理的权衡取舍

文章描述:可用性测试的权衡之道. 对于可用性测试,业内人士存在一些普遍认可的原则.它们神圣地如同自然科学里的理论,似乎我们只能对其言听计从.俯首称臣才能践行出"好的可用性测试".其实,即便是科学,它的一个特征也是"可证伪性"--理论的正确性总是存在前提条件的.真理再向前一步就成为谬误! 可用性测试中的原则同样如此,需要根据目的.资源.环境的不同,灵活把握.权衡取舍,而非一味恪守某一个或某几个原则,也许这才是可用性从业人员经验重要性的体现. 一.任务设置:精细 VS

网站可用性测试:三种可用性测试方法

文章描述:网站可用性测试:三种可用性测试方法. 本文介绍三种可用性测试方法,可能很多朋友已经知道,不过对于网站设计师来说可用性测试时十分重要的.所以再次整理出来供分享.  我们先说下为什么可用性测试如此重要. 首先可用性测试可以发现你网站的潜在问题,通过可用性测试获得的反馈数据,可以了解一个用户在你网站中做了什么,以及用户如何看待和理解你的网站.此外优秀的可用性性网站可以增强用户的互动性,用户也更愿意将网站分享给其他人.对于电子商务网站来说,可用性可以增加网站转化率.总之可用性可以增加你网站的附

如何设计和进行可用性测试:分析找到可用性问题

文章描述:本文所介绍的测试方法是简单,非正式的,小样本的,以发现严重问题为目的的. 可用性测试是改善产品的最佳方式之一,这一点,在内部已经是不争的共识.只是由于用研人手总是不足,所以为了能让各个部门的同事能更快速地展开一些研究和测试的工作,我们陆续整理了一些简单的文档和教程,并计划通过集中的培训来普及一些用户体验的方法.因此,要特别强调的是,本文所介绍的测试方法是简单,非正式的,小样本的,以发现严重问题为目的的.如果要深入了解测试的原理,方法,请参阅以下几本书: Handbook of usab

用户体验设计:找到可用性测试参与者

当一个好的测试用户很难找到时 假设你被任命进行一场可用性测试.请问如何解决以下3个有关被测人员招募的问题?这些问题在过去的一年里总是困扰着我. 一个开发人员想要为以高级律师为目标用户的手机应用软件进行一次可用性测试.那么如何使得这些极其忙碌且有权有势的人来进行测试? 一个为飞机头等舱设计躺椅的设计师想要对他的目标用户进行躺椅的控制测试.他如何吸引那些有钱的人来加入他的测试评估? 一个科技公司开发了一个协助找到并跟踪恐怖分子的安全服务.它如何来雇佣间谍测试这款服务? 你显然可以提出一些想法来帮助解