第八章信度

Download Report

Transcript 第八章信度

第八章
主讲
信度
第一节
信度概述
第二节
估计信度的方法
第三节
影响信度的因素
潘发达(讲师,心理学硕士)
心理测量与评价
第一节
信度概述
一、信度的含义
二、信度的指标
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
一、信度的含义

指一个测验的稳定性程度。

是指同一被试在不同时间内用同一测验(或
两个等值测验)重复测量,所得结果的一致
程度。
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
二、信度的指标
 信度系数
rxx=ST2/SX2 =rXT2
 信度指数
rXT=ST/SX
 测量标准误
信度指数的平方即信度系数
SE=SX
信度越高,标准误越小;信度越低,标准误越大。
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
第二节
估计信度的方法
一、重测信度
二、复本信度
三、内部一致性信度
四、评分者信度
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
一、重测信度——稳定性系数
测验
相距:2-4周
再测
 前后两次是同一批被试
 前后两次使用的是同一个测验
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
二、复本信度——等值性系数
复本A
最短时距
复本B
 一半被试先A后B;另一半被试先B后A
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
三、内部一致性信度
1.分半信度
 将测验按奇偶数分为等值的两半,计算两半测验
得分相关,即为分半信度。
校正:
 斯皮尔曼-布朗公式
两半测验分数的变异数相等
 弗郎那根公式
卢伦公式
主讲
潘发达(讲师,心理学硕士)
两半测验分数的变异数不等
心理测量与评价
K  R20公式:
 k   pi qi 
r kk  
 1  2 
Sx 
 k 1  
库德-理查逊公式(只适用于1、0记分测验)
K 表示构成测验的题目数, pi 为通过第i 题的人数
2.同质性信度

K  R20公式:
K  R21公式:
 k   pi qi 
 k   kpi qi 
r kk  
1


r kk  

 1  2 
S x2 
 k 1  
Sx 
 k 1  
K 表示构成测验的题目数, pi 为通过第i
qi 为未通过第i 题的人数比
kS 2  X题的人数比例,
(k  X )
 x
 克伦巴赫α系数(适用于多重记分测验)
2
K  R 公式:
21
 2
 kk    kpi q
i S
r kk  
 k  1  11 S x2  2i
(k  1) S x
 K 表示构成测验的题目数, X 为测验总分的平均


k 1
Sx 
kS  X (k X )

2
(k  1) S
其中K 为测验的题目数, Si 为某一题目分数的变异数
2
x
2
x
主讲
K 表示构成测验的题目数, X 为测验总分的平均数, s2x为测验总分的变异数.
潘发达(讲师,心理学硕士)
心理测量与评价
四、评分者信度
 用来测量不同评分者之间产生的误差。

两个评分者评价多个对象时采用积差相关即可

多个评分者评定多个对象时采用肯德尔和谐系数
一般认为,在成对的受过训练的评分者之间的一致性
要达到0.9以上才认为评分是客观的!
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
例子:假设有三位专家给六篇论文评等级,
结果如表所示,试计算其评分者信度。
论文
1
2
3
4
5
6
1
2
4
1
5
6
3
2
3
4
1
5
6
2
3
3
5
1
4
6
2
Ri
8
13
3
14
18
7
专家
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
各种信度系数相应误差方差的来源
信度系数类型
重测信度
时间取样
复本信度
内容取样
重测复本信度
分半信度
主讲
误差方差来源
时间和内容取样
内容取样
同质性信度
内容的同质性
评分者信度
评分者之间的差异
潘发达(讲师,心理学硕士)
心理测量与评价
第四节
影响信度的因素
一、样本特征
 样本团体异质性的影响
异质,则高估信度;相反则低估信度
 样本团体平均能力水平的影响
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
二、测验长度
 测验越长,测题或内容取样越有代表性
 测验越长,受猜测因素影响就越小
 项目越多,每个项目上的随机误差相互抵消
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
rnn=
nrxx
1+(n-1)rxx
n=
rnn(1-rxx)
rxx(1-rnn)
(斯皮尔曼-布朗通式)
公式中:
n 为改变后长度与原长度之比
rxx 为原测验的信度
rnn 为测验长度为原来的n倍时的信度
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
三、测验难度
人
数
人
数
A
主讲
B
分数
测验太容易
负偏态分布
测验太困难
正偏态分布
潘发达(讲师,心理学硕士)
分数
样本的分数范围变
窄,信度降低。
心理测量与评价
从理论上说,只有难度水平为0.5时,才能使测
验分数分布范围最大,求得的信度也最高。
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
四、时间间隔
以再测法或重测复本法求信度,两次测验相隔时间
 越短,信度系数越大
 越长,信度系数越小
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
五、其它因素
SE 2
由公式 rxx=1- S 2 可知:
X
“凡影响测量随机误差的因素都会影响信度”
 测量工具本身
 被试
 施测过程
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
思考题:
 指出各种信度系数所对应的误差来源。
 已知某态度量表有6道题,被试在各题上得分的
方差分别是0.80,0.81,0.79,0.78,0.80,
0.82,测验分数的方差为16.00,求α值。
 怎样提高测验信度?
主讲
潘发达(讲师,心理学硕士)
心理测量与评价
第八章内容到此结束
谢 谢!
主讲
潘发达(讲师,心理学硕士)
心理测量与评价