统计学问卷效度、信度的检验

《统计学问卷效度、信度的检验》由会员分享，可在线阅读，更多相关《统计学问卷效度、信度的检验（89页珍藏版）》请在文档大全上搜索。

1、调查问卷的效度、信度调查问卷的效度、信度2013年 09月 02日 丽水学院商学院 何永达 副教授效度？效度？信度？信度？whats reliability? whats validity? 一、一、 Questionnaire Validity 二、二、 Example of Validity 三、三、 Questionnaire Reliability 四、四、 Example of Reliability 五、五、 The correlation between Reliability and ValidityMain ContentPreparative Knowledge1.误差公理

2、误差公理l误差(error)是指对事物某一特征的度量值偏离真实值的部分，即测定值与真实值之差，样本统计量与总体参数之差。l没有一项研究推论能够达到百分之百的真实。 No study is free of errors, the inferences are never perfectly valid.l 误差公理：实验结果都会有误差，误差自始至终存在于一切科学实验的过程之中。 2.2.误差的种类误差的种类(types of error)(types of error)（1 1）随机误差（）随机误差（random errorrandom error）l随机误差是由不确定原因引起的，不可避免随机误

3、差是由不确定原因引起的，不可避免和消除。和消除。 其偏离总体的方向不能确定。包括其偏离总体的方向不能确定。包括随机测量误差和抽样误差。随机测量误差和抽样误差。l l随机测量误差（random measurement error） ：没有固定的倾向，可使多次观测结果有大有小。l抽样误差（sample error） ：由于抽样造成的样本指标与总体指标之间的差别。（2 2）系统误差系统误差（systematic errorsystematic error）l由于偏倚（使研究结果按照一个方向偏离总体， bias）产生的错误结果，可校正和，可校正和消除。消除。 l(3) 过失误差（gross error

4、)是由于科研设计错误，或实验者的主观片面、粗心大意引起的误差。必须避免和剔除！必须避免和剔除！ 问卷测验中测量误差通常来源于两个方面：l 一是产生于问卷测验过程中的误差，称为测量误差（measurement Error），也称为随机误差（random error）；l 二是由问卷的结构质量造成的误差，称为系统误差（system Error）。lmeasurement Error reliability（信度）lsystem Error validity（效度）一、调查问卷的效度一、调查问卷的效度lThe validity of a questionnairel效度（validity）通常是指问

5、卷的有效性和正确性，亦即问卷能够测量出其所欲测量特性的程度。l对于一个标准测验来说，效度比信度更为重要。1.效度分析的意义l效度是问卷调查研究中最重要的特征，问卷调查的目的就是要获得高效度的测量与结论，效度越高表示该问卷测验的结果所能代表要测验的行为的真实度越高，越能够达到问卷测验目的，该问卷才正确而有效。l问卷的准确性或称为有效性是用问卷的效度加以刻划的，它反映了对问卷的系统误差的控制程度。 2 2、效度的定义、效度的定义l效度是指问卷测验的准确性，即测验能够反映所要测量特性的程度.l包括两个方面的含义：一是问卷测验的目的；二是问卷对测量目标的测量精确度和真实性。效度是一个具有相对性、连续性

6、、间接性的概念。l 在测量理论中，效度被定义为在一系列测量中，与测量目的有关的真变异数 ( 即有效变异 ) 与总变异数之比：222xvxySSrr2xy 表示测量的效度系数，Sv2 代表有效变异数，Sx2 代表总变异数。 3.常用的效度指标l 确定一个问卷效度的方法，通常是以答卷者的问卷得分和另一个效度标准求相关，以其相关系数的大小来表示效度。如果相关系数高，则该问卷的效度就高。l 一般常用的效度指标有内容效度、结构效度。(1)内容效度 (content validity)l内容效度是指问卷内容的贴切性（relevance）和代表性（representativeness）,即问卷内容能否反应所

7、要测量的特质，能否达到测验目的，较好地代表所欲测量的内容和引起预期反应的程度。内容效度常以题目分布的合理性来判断，属于命题的逻辑分析，所以，内容效度也称为“逻辑效度” (logical validity)、“内在效度（intrinsic Validity）”、“循环效度（circular validity）” 内容效度的评价主要通过经验判断进行，通常考虑3方面的问题：l其一是项目所测量的是否真属于应测量的领域；l其二是测验所包含的项目是否覆盖了应测领域的各个方面；l其三是测验题目的构成比例是否恰当 l常用的内容效度的评价方法有两种：l一是专家法，即请有关专家对问卷题目与原来的内容范围是否符合进

8、行分析,作出判断，看问卷题目是否较好地代表了原来的内容l二是统计分析法，即从同一内容总体中抽取两套问卷，分别对同一组答卷者进行测验, 两种问卷的相关系数就可用来估计问卷的内容效度l计算某个问题与去掉此问题后总得分的相关性情况，分析是否需要被剔除（敏感性分析） (2)结构效度(Construct Validity)l 结构效度又称构想效度，是指问卷对某结构效度又称构想效度，是指问卷对某一理论概念或特质测量的程度，即某问一理论概念或特质测量的程度，即某问卷测验的实际得分能解释某一特质的程卷测验的实际得分能解释某一特质的程度。如果我们根据理论的假设结构，通度。如果我们根据理论的假设结构，通过问卷测验

9、得到答卷者实际分数，经统过问卷测验得到答卷者实际分数，经统计检验，结果表明问卷能有效解释答卷计检验，结果表明问卷能有效解释答卷者该项特质，则说此问卷具有良好的结者该项特质，则说此问卷具有良好的结构效度。构效度。常用的确定结构效度的方法有：常用的确定结构效度的方法有：l(1)根据文献、前人研究结果、实际经验等建l 立假设性理论建构；l(2)对问卷题目进行分析。主要是分析问卷的l 内容，答卷者对题目所作的反应，问卷题l 目的同质性以及分项目之间的关系来判断l 问卷的结构效度；l(3)根据建构的假设性理论编制适当的问卷；l(4)计算与同类权威问卷的相关;l(5)以统计检验的实证方法去考查问卷是否能l

10、 有效解释所欲建构的特质。 3效标效度（Criterion Validity）l效标效度也称为准则关联效度（Criterion-Related Validity）、经验效度（Empirical Validity）、统计效度（Statistical Validity）。效标效度是说明问卷得分与某种外部准则（效标）间的关联程度，用问卷测量得分与效度准则之间的相关系数表示一般估计效标效度的主要方法有：一般估计效标效度的主要方法有：l（1）相关法，即求某问卷分数与效标间的相关，所得结果即效标效度。l（2）区分法，即看问卷分数是否可以区分由效标所划分的团体。l可以运用t检验对先后两次问卷结果平均分数进行

11、差异性检验。若差异有统计学意义，说明问卷是有效的；若差异无统计学意义，说明问卷是无效的。 (4)判别效度（Discriminant Validity）l 判别效标也称为辨别效标，是指运用相同的问卷测定不同特质和内涵，测量结果之间不应有太大的相关性。(5)聚合效度（Convergent Validity）l 聚合效度也称为收敛效度，是指运用不同测量方法测定同一特质所得结果的相似程度，即对同一特质的两种或多种测定方法间应有较高的相关性。6.效度的评价l Spitzer认为如果满足以下5个条件就可以认 为问卷由效：l（1）问卷有内容效度和结构效度；l（2）在问卷制定阶段应当请有关人员提出意见，供修正