可用性测试因为耗费时间较长,能够参与测试的用户资源稀缺,回收样本量小能够收集到的样本量一般会比较小。样本量小的情况下这个样本量所能概括的整体是范围比较大的,会存在较大误差,那么在较为严谨的报告中,可能需要对所得分数和除测试样本外的分值预期进行描述,这时候会涉及到统计学中常用的描述方式,即通过置信度及置信区间来描述,根据置信区间的下边界看软件是否低于行业标准。

置信区间

是指在一定概率下包含样本位置总体参数的这部分数值区间,通过计算置信区间来描述测试结果的概率。置信区间宽度和样本量之间是一个逆平方根的关系, 样本量越小,误差越大,未知样本数据可能所在的区间更大。

置信度就是说,你测得的均值,和总体真实情况的差距小于这个给定的值的概率,应该是1-α;换句话描述,即我们有1-α的信心认为,你测得的这个均值和总体的实际期望很接近了(测得的均值就是总体期望是很草率的,但是说,我有95%的把握认为我测得的均值,非常接近总体的期望了)。研究员可以选择0%-100%之间的任意数值的置信度,通常设为90%或95%(最常用)。

临界值是在原假设下,检验统计量在分布图上的点,这些点定义一组要求否定原假设的值。

置信区间计算

置信区间= (样本平均值-误差幅度)~(样本平均值+误差幅度)=(x -(x- μ))~(x +(x- μ))

x = 样本平均值
误差幅度=临界值*(样本标准差/样本量的平方根),即:(x - μ) = α* (s / sqrt(n))
α=临界值(Excel函数=TINV(1-置信度,样本量-1))
μ=被检验的基准值(行业标准)
s=样本的标准差(Excel函数=STDEVP(N1,N2,…))
n=样本量
tips:临界值可以通过所设置信度和样本量在t分布表中查找相应的值

可用性测试策划应用

在做可用性测试前,需要进行很多准备,过程中也需要记录很多相关的信息,初步尝试的设计师可以参照以下步骤完成可用性测试的整个流程:

Step1: 确定调研目标(目的、用户、时间、环境)

Step2: 确定测试任务(任务内容、测试方案、SUS问卷地址),任务内容可以通过抽取用户体验地图(User Journey Map)流程中的触点设计,保证流程的完整性和任务的关联性

Step3: 引导测试用户完成可用性测试,过程中记录测试时间、用户遇到的问题、发生的频率等等,记录类型可以根据测试测中点进行记录

Step4: 用户填写SUS问卷,回收问卷分数进行计算,得出SUS分数、可用性分数、易用性分数的均值作为本次测试的结论

Step5: 作为补充,可以计算SUS样本分数的置信区间,预期未被测到的目标用户对产品的评分可能落在的区间,区间下限可横向对比,看是否低于行业标准。可以描述为“样本分数标准误差约=5.34,置信区间为63.78~69.12;有95%的把握认为测得的均值接近总体期望,未测样本分值将落在63.78~69.12之间,符合行业标准预期”。

Step6: 通过测试过程中观察用户行为,探讨用户提出或下意识忽略的问题,并进行问题的记录和分类

Step7: 用户访谈记录问题进行解析,对问题的严重程度进行评级,选出问题较多的部分并提供可能的解决办法进行优化

Step8: 根据以上结论对测试进行总结性分析

时间长、样本小,可用性测试如何数据分析?相关推荐

  1. 隔得时间长不用小程序原生要注意的点

    1,data中的数据如果要访问需要用this.data.属性名,写vue写多了会忘掉data. 2.数据的更新一定切记使用this.setData({属性名:要更新的值})这样更新. 3.如果想要得到 ...

  2. 移动app测试的多样性_移动可用性测试(四):远程测试

    实际工作中,虽然远程测试用得更少,但它确实能解决一些现场测试无法解决的问题.比如在当地无法找到目标用户时,远程测试相对出差是更为廉价可行的做法.或者当需要大量的样本时(现场测试因为时间空间的限制,只能 ...

  3. 如何在10分钟内进行可用性测试

    1.用户测试的类型 汇总测试 · 目标:为了证明一个观点并回应一个假设,例如:"在x测量中a>B吗?"(与方案A和B的差别通常很小,仅在设计方面有所不同) · 测试:需要对照 ...

  4. 移动端分步注册_移动应用程序的可用性测试:分步指南

    移动端分步注册 Written by Justin Mifsud 由贾斯汀·米夫苏德 ( Justin Mifsud)撰写 The mobile market is huge and growing ...

  5. 敏捷开发中的可用性测试

    陈 序明, 资深研发工程师及售前工程师, IBM 王 建芳, 资深软件测试工程师, IBM 李 雨恭, 软件工程师, IBM 简介: 近年来有两个词语在软件行业迅速"走红",一个是 ...

  6. 可用性测试:A/B测试的实现方法

    网站设计中,我们经常会面临多个设计方案的选择,比如某个按钮是用红色还是用蓝色,是放左边还是放右边.传统的解决方法通常是集体讨论表决,或者由某位专家或领导来拍板,实在决定不了时也有随机选一个上线的.虽然 ...

  7. 《妙手回春:网站可用性测试及优化指南(修订版)》一开场白:管我叫以实玛利吧...

    本节书摘来自异步社区<妙手回春:网站可用性测试及优化指南(修订版)>一书中的第1章,第1.1节,作者 [美]Steve Krug,更多章节内容可以访问云栖社区"异步社区" ...

  8. 【PC工具】PhotoScape简单好用绿色免费功能强大的照片编辑器(文章评论小程序测试)...

    公众号关注 "DLGG创客DIY" 设为"星标",重磅干货,第一时间送达. 如图所示功能很多(我认为比较实用的功能加粗) 照片浏览:和windows文件列表差不 ...

  9. PMCAFF | 阿里PM的可用性测试秘籍:有理有据的用户体验优化

    微信公众号|卿说 原创作者|周卿 周卿,现任阿里巴巴商家业务事业部产品经理,负责大数据业务相关商业产品.硕士毕业于清华大学,曾任有道词典产品经理. 对于产品经理而言,有几个场景怕是最难熬的: 第一,产 ...

最新文章

  1. JavaScript的语言标准
  2. 有了这个科研思路,高水平SCI就在手边!
  3. 什么样的程序员生涯指南,能在GitHub上获3.6万星
  4. 什么是慢查询?如何通过慢查询日志优化?
  5. Power Bi:零售数据可视化
  6. php7安装xhprof,PHP 7.1安装xhprof进行性能分析的介绍
  7. vue 父传子_Vue.js教程Vue基本指令
  8. java coherence_Coherence配置默认覆盖路径
  9. paip.python pyqt 加载ui 方法使用connect总结attilax
  10. 16代表啥_16代表的爱情恋爱含义16代表什么爱情含义
  11. 小熊派 LVGL 移植文件系统
  12. 从 0 开始学游戏开发
  13. cout 常用成员函数简介(C++输出格式控制)
  14. LTE上行物理层传输机制(2)-PUSCH上行跳频之Type2频率跳频
  15. PS套索工具改变头发颜色
  16. 远程渗透登陆他人电脑
  17. 老师,你确定Java注释不会被执行吗?
  18. 各大佬抨击ICML审稿太随意:LeCun三篇全没中,马毅说以后再也不投了
  19. 验尸官称Debian创始人 Ian Murdock 是自杀身亡
  20. appfog mysql_麻烦隧道我的本地Wordpress安装到appfog上的MySQL数据库

热门文章

  1. 54页智慧城市大脑建设方案
  2. 电压测试软件中文,System Information Viewer(SIV主板电压温度测试)
  3. 怎么把手机游戏隐藏在计算机里,我把程序中的游戏隐藏了,怎么找到并恢复?...
  4. ThinkPad Z13 评测
  5. Python编写的DHT的搜索引擎(测试)
  6. mysql数据库麦如何修复_非常规方法,轻松应对Oracle数据库危急异常
  7. Centos7.2上安装libreoffice7.1.0.2
  8. 空前火爆的小米3来袭,怎么安装驱动?小米3驱动安装新教程
  9. FineReport普通报表使用总结
  10. FineReport11-下拉框-数据搜索