应用内评分_评分者信度

一：含义

评分者信度（scorer reliability）指的是多个评分者给同一批人的答卷评分的一致性程度。

评分者信度分为评分者内信度和评分者间信度 。前者是对同一个分者对同一样本在不同场合出现是否判定为同样分数的指标；后者是测量不同评分者对同一样本是否给出同一个正确的分数的指标。在实际应用过程中，最常测评评分者间信度。

二：适用情况

在由客观性试题组成的心理测验中，答案具体而固定，无需考察评分者信度。但在投射测验、道德判断测验、创造性思维测验等测验的评分中，答案并不固定，评分时必然掺杂有主观判断因素，因此，需要考察评分者信度。评分越一致, 评分者信度越高。

评分者信度的估计与评分者人数的多少有关，若只有两人参加，评N份试卷，或一人先后两次评N份试卷，则最常用Spearman等级相关系数来求信度；若三人或三人以上的评分者评N份试卷时，常用肯德尔和谐系数来求信度。下面我们用案例来具体说明求取这两个系数的操作。

三： SPSS案例

1【问题】甲乙两位教师评阅10份作文试卷，他们对每个学生评定的分数和等级如下表所示。请问两位教师评分的一致性如何？

Step 1：打开数据，选择【分析】——【相关】——【双变量】。

Step 2：将左侧“甲评分”、“乙评分”选入右侧【变量】中，在“斯皮尔曼”处打钩，点击【确定】。

Step 3：结果分析。斯皮尔曼（Spearman）相关系数为0.841（结果中带有两个*的，下面有说明，相关性显著），评分者一致性很高。

注】上表中的甲乙等级是按照秩次的排列规则得到的，在Spearman检验中，直接用数据以及用相应的等级数据进行计算，最终的结果是相同的。

2 【问题】有5位教师对7篇作文进行等级评定，评定结果如下表所示。请问，5位教师评定结果是否一致？

Step 1：打开文件，选择【分析】——【非参数检验】——【旧对话框】——【K个相关样本】。

Step 2：将“作文一~七”全部选入右侧【检验变量】中，并在下方【肯德尔】处打钩，点击【确定】。

Step 3：结果分析。我们可以得到傅莱德曼检验的相关统计量和肯德尔W检验的相关统计量，我们主要关注后者。

如下图，肯德尔和谐系数W值为0.891，卡方值为0.891，P值<0.01，因此可以看出，不同评分者的一致性非常高。

【注意】若被评对象的数目N>7，则要先将W值转化成卡方值，再对卡方值进行显著性检验。X2=K（N-1）W。

在主页内回复20180626，可获得本次案例哦~

应用内评分_评分者信度相关推荐

应用内评分_游戏评分低，怎么办？
[面试题] 某款手游在应用市场评分相比同类型游戏处于劣势. 请分析可能的原因并给出相关建议. [分析思路] 一.明确问题 1. 明确业务指标定义:应用市场评分一般指某一应用在某个应用市场上线以来的总 ...
应用内评分_自考书院：2020年10月02358单片机原理及应用试题和评分参考
免费试看2020年10月甘肃自命题<02358单片机原理及应用>试题和评分参考售价:12 元1 购买流程第一步扫码加好友. 说明:首先"扫码"添加 ...
【iOS】iOS10.3新增API:应用内评分
1.需求在iOS10.3以前,APP引导用户评分时需要跳转到AppStore中操作,并且AppStore在国内有时加载会较慢,即便有的用户想给APP好评,但是等了几秒钟评分页面还没加载出来从而放弃. ...
外网怎么访问内网_神卓互联搭建远程桌面和web应用（很详细）
外网怎么访问内网_神卓互联搭建远程桌面和web应用,我们都知道国内IP资源严重不足,导致运营商商们都不给固定的IP,都是动态分配的,现在基本的已经是100或者10开头的局域网的IP,运营商的ADSL网 ...
苹果应用内评分弹框次数限制
在网上查了一下,然后去官网看了一下苹果应用内评分弹框的次数限制.这里记录一下: 首先,这些App将需要使用全新的苹果公司推出的评分弹窗,这样用户可以在不退出应用程序的情况下进行评分. 第二个限制是:弹 ...
GooglePlay 应用内评分测试
为了提升用户体验,我们在应用内集成了Google play的应用内评分,体验如下: 前期接入都挺简单,只是在测试这块遇到点麻烦. 官方提供的测试文档文档中提供的使用内部测试轨道进行测试的方法之前不 ...
iOS App内评分
App内评分苹果在iOS 10.3中增加了App评分的新API,用户可以直接在App内评分,而不用跳转到App Store. 使用非常简单,只有一行代码,但也说明了它没有任何可定制性. 此API使用 ...
C语言实用算法系列之学生管理系统_单向链表内操作_选择排序
单向链表实现 #include <stdio.h> #include <malloc.h>typedef int DATA;struct SNode {DATA data;SN ...
mysql查询三个月内的_如何在三个月内自学攻克雅思6.5分？
新西兰留学移民经历分享-进行时(3) 编者按: 选新西兰留学前,看过很多博主的帖子,让一个从没到访过新西兰的我有了多一些了解和规划.现在也希望能把自己的经历分享给大家,同时作为人生中比较大的一个决定, ...

应用内评分_评分者信度

应用内评分_评分者信度相关推荐

最新文章

热门文章