信度与效度分析.ppt

第2讲信度与效度分析方法根据调查目的设计的调查问卷是一种测量工具
。其质量高低对调查结果的真实性、适用性等具有
决定性的作用。为了保证问卷具有较高的可靠性和
有效性。在形成正式问卷之前，应当对问卷进行试
测，并对试测结果进行信度和效度分析，根据分析
结果筛选问卷题项，调整问卷结构，从而提高问卷
的信度和效度。
调查问卷的信度和效度分析绝非赘疣蛇足，而
是研究过程中必不可少的重要环节。信度和效度分
析的方法包括逻辑分析和统计分析。
第一节信度分析方法
信度(reliability)又称稳定性或精确度。用以反映在相同条件下，对同一客观事物测量若干次，测量结果的相互符合程度或一致程度，说明数据的可靠性。当使用同一测量工具重复测量某一客观事物时所得结果的一致程度越高，则该测量工具的信度就越高。
误差(error)是指对事物某一特征的度量值偏
离真实值的部分，即测定值与真实值之差，样
本统计量与总体参数之差。1.抽样误差
2.系统误差（systematicerror）3.随机测量误差问卷（量表）测量中的测量误差通常来源于两个方面：
一是产生于问卷（量表）测量过程中的误差，称为测量误差（measurementError），也称为随机误差（randomerror）；
二是由问卷（量表）的结构质量造成的误差，称为系统误差（systemError）。

measurementErrorreliability
systemErrorvalidity信度是用估计测量误差大小的尺度，来说明
测量结果中测量误差所占的比例。
信度可定义为真实分数(truescore)的方差
与测量实得分数(observedscore)的方差之比
，当实得分数变异可以全部由真实分数的变异解
释时，测量误差就是0，这时测量结果的信度为
1。信度包含两层含义：信度指标多以相关系数表示，大致可分为三类：
稳定系数（跨时间的一致性），等值系数（跨形式的一致性）和内在一致性系数（跨项目的一性）。三、信度的种类及计算重测信度是指用同样的测量工具，对同一组被调查者间隔一定时间重复测试，两次测试结果的相关程度。重测信度可以通过两种途径进行考察：重测信度的计算方法1.重测信度重测信度法特别适用于事实式问卷，如性别、出生年月等在两次施测中不应有任何差异，大多数被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化。如果没有突发事件导致被调查者的态度、意见突变，这种方法也适用于态度、意见式问卷。由于重测信度法需要对同一样本试测两次，被调查者容易受到各种事件、活动和他人的影响，而且间隔时间长短也有一定限制，因此在实施中有一定困难。
复本信度法是让同一组被调查者一次填答两份问卷复本，计算两个复本的相关系数。复本信度法要求两个复本除表述方式不同外，在内容、格式、难度和对应题项的提问方向等方面要完全一致，而在实际调查中，很难使调查问卷达到这种要求，因此采用这种方法者较少。
2.复本信度（alternateformreliability）缺点：
如复本编制不容易，易出现顺序效应，受练习的影响；
复本信度只能反应问卷内容所造成的误差，无法反应答卷者本身所造成的误差等。3.分半信度(split-halfreliability)3.分半信度3.分半信度为问卷测验总得分的方差，pi表示答对该题的人数占总答卷人数的比例，pi可视为该题的难度，qi=1-pi。式中n为问卷包含的题项总数.
Cronbach’sα系数是Cronbach于1951年创立的，用于评价问卷的内部一
致性。α系数取值在0到1之间，α系数
越高，信度越高，问卷的内部一致性越好。Cronbach’sα系数不仅适用于两级记分的问卷，还适用于多级计分的问卷。Cronbachα信度系数是目前最常用的信度系数，其计算公式为：

其中，K为量表中题项的总数，为第i题得分的题内方差，为全部题项总得分的方差。从公式中可以看出，α系数评价的是量表中各题项得分间的一致性，属于内在一致性x信度系数。这种方法适用于态度、意见式问卷（量表）的信度分析。α系数有以下性质：

（1）α系数是所有可能的分半信度的平均值；
（2）α系数是估计信度的最低限度；
（3）当问卷计分为二分名义变量时，即答案为0或1，α系数与KR20值相同，即库德-理查森信度公式是克隆巴赫的α系数的一个特例。低信度:α<0.35,中信度:0.35<α<0.70,
高信度：0.70<α
一般地，问卷的α系数在0.8以上该问卷
才具有使用价值。
Cronbach‘sα值皆达0.85以上，表明
问卷信度良好。
6.评分者信度（inter-scorerreliability）四、影响信度的因素提高信度的方法（1）适当延长问卷的长度（2）问卷的难度适中（3）问卷的内容尽量同质（4）测验的时间要充分（