网站设计用户测试:只需测试5个用户

文章描述:为什么网站项目只需测试5个用户.

人们总是认为,用户测试是一个复杂且代价昂贵的事情。一个网站设计项目需要一个庞大的预算和长长的时间表。其实,可用性测试并非如大多数人认为的是浪费资源的事情。在你可承受的测试成本范围内,使用不超过5个用户,即可达到很好的测试效果。

最初的研究过程中,Tom Landauer 和我得出了一个 可用性测试方面的,关于测试人员的数量的公式:

假设一个可用性测试的测试人员数量为n,N为所有可用性测试发现的问题总数,L是单个测试人员的问题发现率。

N(1-(1-L)n)

我们发现,大多数项目的平均的问题发现率为31%。当 L=31%时,可以得到如下的图形:

当用户为零时,发现的问题数目是零,即“零用户零发现”。我们可以看到,第一个用户几乎发现的三分之一的设计的可用性的问题,和零发现截然不同。当我们看第二个用户的测试情况时,可以发现,有一部分问题是和第一个user重合的。人们之间的行为或发现有一定的差异,第二个user可以发现一些不同于第一个user的问题,有区别于第一个用户的新发现,但是问题数量不及第一个用户的最初发现。第三个用户做了很多前两者重复的事情,有些甚至重复2次。另外,当然,第三个用户本身异能发现少量的新问题,显然数量远远不及前 两个用户。

现在,加入更多的测试人员(user),你会发现一个现象,随着人数的增加,重复的事情一再出现,发现的新问题发现率开始下降。显然不再需要让更多的人来重复发现重复的问题,自然回回去重新设计,以解决发现问题。

到了第5个user,你就是在浪费时间,去做重复的事情,并且几乎再没有先的发现。

迭代设计

上图中的曲线很清除地标明,至少需要15个用户去发现所有的设计中的可用性问题。但是,为什么我更倾向于推荐用更少的测试人员呢?一个主要的原因是合理分配可用性测试的预算。让我们看看,当你招聘15个客户代表来对你的设计进行测试时,就一位着你得花费5个用户的3倍的费用!

当我们去做用户的可用性测试时,最终的目标是为了解决或者提高实际的设计,而不是仅仅得到一份书面的报告。当5个用户的首次测试发现了85%的可用性问题时,你已经可以在下一个desagn中修复这些问题。

如果想发现更多的问题,当然需要再次测试。即使我说重新设计可以修复第一次测试时发现的问题,事实是你可能认为新的设计可以客服已有的问题。但是,在没有人能设计出更完美的用户界面之前,无法保证新的设计可以修复事实存在的问题。第二次测试可以回归已有的问题,确认是否修复。同时,一个新的设计,意味着还需要一次新的用户测试。

5个用户的第二次测试,可以发现第一次测试时遗留的15%的问题。(仍旧会有2%的问题遗留要等到第三次测试来发现)。

最终,第二次测试的深度可以设计到网站的设计架构,获取到我们所需的一些信息,如体系架构、任务流程等是否符合客户需求。这些问题常常在隐藏在一些表面的可用性问题之后,而为人们所忽略。

所以,第二次的测试作为第一次测试的质量保障,并且可以发现更深入的问题。第二次测试会为系统的重新设计提供一份新的问题清单,但数量显然会少于第一次测试。但是,本次测试并不能完全补充第一次测试,还需要第三次的测试来进行查漏补缺。

5个用户三次的最终测试效果要远高于15个用户测试一次的效果。

为什么不建议单用户的测试?单个人的行为总会有一些风险,人总会有一些意外的,不确定的行为。

你可能会认为15个用户做一轮测试,比5个用户做3轮要好。因为曲线表明,第一个用户的发现率明显高于后续的用户,但是,为什么我们要坚持多轮测试?两个原因:第一,通过观察3个人就可以看到用户行为的多样性,可以洞察到那些行为是独特的那些是可以一概而论的;第二,用户测试的成本效益分析表明,3-5个测试用户的最佳比例,依赖于测试的风格。初始的运行成本和测试计划相关,多个用户对于降低最初的成本效果更好。

什么时候增加更多的测试用户

当你的网站客户群覆盖到几个不同高度的用户群时,你需要增加更多的测试用户。上面公式的适用于网站的用户群接近或者差异很小时。举个例子,当你的网站客户群是定位于父母和孩子时,你就需要充分考虑到两个不同群里的使用行为。系统的相同之处是对于采购代理商的销售人员之间的连接。

甚至当用户群体差异性完全不同时,在两类人之间也可发现很多相似之处。毕竟,所有的用户都是人。所有的可用性问题反应的都是人的行为与网站之间的互动和影响。

在测试不同的用户群时,你不需要每个用户群中都有很多测试人员(user),有以下的一个测试人员数目就足够了:1、如果测试两个用户群,则每类群需要3-4个用户;2、如果测试3个或更多的用户群,则每类有3个测试用户就可以了(至少3个users就可以确保你覆盖到某一个用户群中的不同的行为)

参考:Nielsen, Jakob, and Landauer, Thomas K.: “A mathematical model of the finding of usability problems,” Proceedings of ACM INTERCHI‘93 Conference (Amsterdam, The Netherlands, 24-29 April 1993), pp. 206-213.

本文编译自舒心,原文地址。

译文作者:Jakob Nielsen 译文地址:useit.com

时间: 2024-10-06 08:41:28

网站设计用户测试:只需测试5个用户的相关文章

福禄克最快现场测试仪亮相 认证测试只需8秒

2017年BICSI展会,近日在美国坦帕举行.此次展会吸引了数千名来自全球各地的ICT专业人士到访参加,同时有180余个厂家的最新产品也在展会上进行了展示和介绍. 福禄克最快现场测试仪亮相 认证测试只需8秒 此次展会上,福禄克公司展示了其新开发的"DSX-8000 Cable Analyzer"测试仪器.该仪器是福禄克Versiv电缆认证系列产品的最新成员,继承了Fluke产品的一贯品质,帮助数据通信安装方更加快速.准确.有效地实现铜缆和光纤项目的系统验收,满足Cat 8现场测试标准(

用公式说明为什么网站项目只需测试5个用户

人们总是认为,用户测试是一个复杂且代价昂贵的事情.一个网站设计项目需要一个庞大的预算和长长的时间表.其实,可用性测试并非如大多数人认为的是浪费资源的事情.在你可承受的测试成本范围内,使用不超过5个用户,即可达到很好的测试效果. 最初的研究过程中,Tom Landauer 和我得出了一个 可用性测试方面的,关于测试人员的数量的公式: 假设一个可用性测试的测试人员数量为n,N为所有可用性测试发现的问题总数,L是单个测试人员的问题发现率. N(1-(1-L)n) 我们发现,大多数项目的平均的问题发现率

亚马逊测试新网站设计或改变用户购物方式

亚马逊正在测试新的网站设计 新浪科技讯 北京时间9月4日午间消息,亚马逊正在测试新的网站设计,这可能改变用户通过亚马逊网站购物的方式. 互联网电子商务专家表示,亚马逊新的网站设计将使用户更容易地通过平板电脑浏览及使用亚马逊网站.消息人士透露,亚马逊将在数周后发布平板电脑产品. 亚马逊发言人萨利·福茨(Sally Fouts)表示,亚马逊从上周开始测试新的网站设计.她表示:"我们正继续面向更多用户推出新设计,但目前无法确定新的网站设计将于何时面向所有用户发布."福茨也没有透露有关这一新网

从网站设计的角度分析一些取得用户信任的启发

精美华丽的网页设计并非每个企业都需要,中网环球凭借多年的网站建设.网站推广经验,认为网站设计应是围绕着企业不同阶段的网络http://www.aliyun.com/zixun/aggregation/12474.html">营销策略,配合企业网络营销计划而设计制作的.在前期网站策划的基础上,中网环球对于不同网络营销应用的企业,设计具有个性化.符合用户良好体验.拥有高效实用功能模块.并具备延展性的企业网络营销网站.建立起以网站用户体验为核心的网站信息组织.强调视觉效果.量身定制网站功能从而形

网站设计最低要求:满足惰性用户的习惯

中介交易 SEO诊断 淘宝客 云主机 技术大厅 什么是用户习惯?什么又是惰性用户的习惯?相信很多站长对这些词语应该都深有体会,随着现代科技的不断发展,惰性思维已经成为了一种随时可以出现的思维,俗话说习惯成自然:习惯一旦养成就很难被改变,惰性习惯也是一样.而我们在进行网站页面设计的时候不仅仅是站在正常人的角度去考虑问题,更多的时候我们还要去考虑惰性用户的习惯,因为现在很多游荡在互联网中的用户都是惰性的,所以我们的网站要力求最简洁.最方便用户的原则,假如您是一名网站设计师,您是站在勤劳用户的立场上还

万网推高效建站模式 企业建站最快只需24小时

中介交易 SEO诊断 淘宝客 云主机 技术大厅 如今,互联网已经成为传统销售渠道的另一主体,企业建立自己的网站开展网络营销成为大势所趋.而相较以往,从网站规划到上线运行,至少需要2个月的时间.在效率制胜的今天,这种冗长繁琐的流程显然已经不合时宜.对此,万网推出高效智能建站模式,以智能化的建站模式和一对一的设计师服务,有效为传统企业解决 "上网"瓶颈,让建站历程用"小时"计算. 根据艾瑞咨询发布的<2010-2011年中国互联网基础服务市场发展报告>:20

只需登录Android市场,搜索"网易公开课"即可免费安装使用

网易公开课Android版手机客户端正式上线.拥有Android手机的用户,只需登录Android市场,搜索"网易公开课"即可免费安装使用,或者通过电脑访问web版公开课APP下载页面下载APK包进行安装.网易公开课分别在今年2月发布了iPad版.5月又iPhone版发布后再次发布手机客户端.此次网易公开课Android版手机客户端,功能上支持播放进度记忆.断点续播,支持收藏列表与服务器保持同步,实时提醒课程总集数及已翻译集数,并推送所收藏课程的最新翻译通知.此外,该客户端在课程检索方

2015年网站设计将有这十大趋势

每年,网站设计都在快速进步,每天几乎都有新的设计出现.我可以想象得到,2015年将出现最好的网站,包括2014年已经预测到的许多趋势.随着这些趋势在2015年左右实现,现在该是时候让我们预测2015年可能出现的新趋势了.每个人都在反思2014年,并展望2015年,下面就让我们看看2015 年可能出现的网站设计趋势. 滚动翻页更流行 今天出现的大多数新网站倾向于更长的页面,并通过滚动方式翻页.随着移动设备越来越受欢迎,以滚动方式浏览显示器上的内容变得越来越常见,正代替点击方式,特别是在设备的主页面

李彦宏称将开发移动操作系统 启动设备只需1秒钟

据国外http://www.aliyun.com/zixun/aggregation/31646.html">媒体报道,百度CEO李彦宏表示,该公司计划开发一款面向移动设备的轻量级操作系统. 李彦宏在接受媒体采访时表示,百度计划在未来3至5年内开发一款软件,在1秒内启动智能手机或平板电脑,提供一个搜索框供用户使用,"启动操作系统需要运行许多代码,但如果只向用户提供一个搜索框,就会简单得多. 目前,启动iPhone需要45秒.未来,启动移动设备只需1秒钟,用户就可以开始使用搜索框.