① 什么叫信度和效度
一、信度
1、信度(reliability)即可靠性,它指的是采取同样的方法对同一对象重复进行测量时,其所得结果相一致的程度。从另一方面来说,信度就是指测量数据的可靠程度。
2、信度是指测验结果的一致性、稳定性及可靠性,一般多以内部一致性来加以表示该测验信度的高低。信度系数愈高即表示该测验的结果愈一致、稳定与可靠。
3、系统误差对信度没什么影响,因为系统误差总是以相同的方式影响测量值的,因此不会造成不一致性。反之,随机误差可能导致不一致性,从而降低信度。
二、效度
1、效度(Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。效度是指所测量到的结果反映所想要考察内容的程度,测量结果与要考察的内容越吻合,则效度越高;反之,则效度越低。效度分为三种类型:内容效度、准则效度和结构效度。
2、效度是测量的有效性程度,即测量工具确能测出其所要测量特质的程度,或者简单地说是指一个测验的准确性、有用性。效度是科学的测量工具所必须具备的最重要的条件。
3、在社会测量中,对作为测量工具的问卷或量表的效度要求较高。鉴别效度须明确测量的目的与范围,考虑所要测量的内容并分析其性质与特征,检查测量的内容是否与测量的目的相符,进而判断测量结果是否反映了所要测量的特质的程度。
(1)信度分析和效度分析是研究方法吗扩展阅读:
信度和效度的关系有如下几种类型:
①可信且有效
这种问卷准确地反映被调查人员的真实态度,问卷中的题目是和调查目标紧密关联的。若调查结果能真实地反映所调查的对象,测量的误差较小,则说明问卷调查的结果是可信而且有效的。
②可信但无效
这种问卷调查结果虽然能准确地反映被调查人员的真实态度,但问卷中题目与真实的调查目的的关联程度较弱,与调查的目标不相一致。这种情况表明,虽然调查中所得的结果是可信的,但可能在某些环节上出了差错,例如问卷中题目的设计使得所有的被调查人员都出现了理解的偏差,从而出现了系统性的偏差。
③不可信亦无效
在这种情况下,统计调查的结果分布较为分散,是难以从调查问卷中得出有效结果的,这是测量中应避免的类型。
② spss信度和效度分析怎么做
1、在spss的主界面中,需要选择分析并点击降维里面的因子分析。
③ 谁知道调查问卷的信度和效度是怎么回事
测试信度(test reliability)也叫测试的可靠性,指的是测试结果是否稳定可靠。也就是说,测试的成绩是不是反映了受试者的实际语言水平。例如,如果同一套测试在对同一测试对象(即受试者本身没有变化)进行的数次测试中,受试者的分数忽高忽低的话,则说明该测试缺乏信度。测试的信度与测试的效度有着密切的关系。一般说来,只有信度较高的测试才能有较高的效度,但效度较高不能保证信度也一定较高。测试的信度主要涉及到试题本身的可靠性和评分的可靠性这两个方面。试题本身是否可靠主要取决于试题的范围、数量、试题的区分度等因素;评分是否可靠则要看评分标准是否客观和准确。
测试的信度通常用一种相关系数(即两个数之间的比例关系)来表示,相关系数越大,信度则越高。当系数为1.00时,说明测试的可靠性达到最高程度;而系数是0.00时,则测试的可靠性降到最低程度。在一般情况下,系数不会高到1.00,也不会降到0.00,而是在两者之间。对信度指数的要求因测试类别的不同而不同,人们通常对标准化测试的信度系数要求在0.90以上,例如“托福”的信度大致为0.95,而课堂测试的信度系数则以0.70-0.80之间为可接受性系数。测试信度的计算方法有很多种,以下仅介绍三种易于操作的方法:
1)重测法(the retesting method)。用同一套试卷在两个不同时间内来测试同一批受试者,这样便获得两组分数,然后计算出两组分数的相关系数。当然,在两次测试中,学生第二次的测试成绩理应比第一次的要高,因为在第二次测试时学生已经有了进步而且临场经验也更丰富了。但是若该试题是比较可靠的,每个学生在两次测试中的排名次序应该是基本不变的。
2)交替形式法(the alternative method)。对同一批受试者使用试题类型完全相同,难易程度相当,但具体题目不同的两套对等试卷先后进行两次测试,然后计算出两次得分的相关系数。
3)对半法(the split-half method)。测试只进行一次,但将整份试卷的题目按单、双数分成两组来分别计分,算出两组分数的相关系数,然后再用Spearman-Brown的公式计算整份试卷的信度系数。具体计算步骤是:将两组分数的相关系数乘以2,再除以1加两组分数的相关系数。
http://ke..com/view/698674.htm
测试效度(test validity)亦称测试的有效性,指一套测试对应该测试的内容所测的程度。也就是说,一套测试是否达到了它预定的目的以及是否测量了它要测量的内容。例如:“Is photography an art orscience?Discuss.”这种题目以摄影的知识为前提和主要内容,用来考语言能力,就不具有效性。又如用听写来测量学生的听觉能力,其效度也是不理想的,因为书面记录有声语言不仅涉及学生的听觉能力,而且还与他们的书写速度、拼写能力、语法知识、记忆能力和对全文的理解能力等有关。
测试的效度一般可分为以下几类:
1)表面效度(face validity)。指测试应达到的卷面标准,即一套测试题从表面看来是否是合适的。例如,若一次阅读理解力的测试包括许多受试者没有学过的方言词汇,则可认为这次测试缺乏表面效度。表面效度是测试出受试者正常水平的一种保证因素。
2)内容效度(content validity)。指一套测试题是否测试了应该测试的内容或者说所测试的内容是否反映了测试的要求,即测试的代表性和覆盖面的程度。例如,如果某一套发音技能测试题仅仅考查发音所必须具备的某些技能,如只考单一音素的发音,而不考查重读、语调或音素在词语中的发音,那么,该测试的内容效度就很低。
3)编制效度(construct validity)。指一套测试题的诸项目对编制该测试所依据的理论的各个基本方面的反映程度。例如,以结构主义语言理论为基础,认为系统的语言习惯是通过句型而获得的,那么,强调词汇和语法环境的测试题目就失去了编制效度。
4)经验效度(empirical validity)。经验效度是一种衡量测试有效性的量度,通过把一次测试与一个或多个标准尺度相对照而得出。经验效度可分为两种:一是共时效度(concurrent validity),即将一次测试的结果同另一次时间相近的有效测试的结果相比较,或同教师的鉴定相比较而得出的系数;二是预测效度(predictive validity),即将一次测试的结果同后来的语言能力相比较,或是同教师后来对学生的鉴定相比较而得出的系数。
一般来说,对某次测试的效度进行检验时,除了要根据教学大纲的要求和观念有效性的理论对试卷的内容进行考查以外,还须采用计算相关系数的定量方法,即计算出本次试卷与另一份已被确定能正确反映受试者水平的试卷之间的相关系数。系数高则有效性大。课堂测试的效度应在0.4-0.7之间,规模较大的测试其效度应在0.7以上。
④ 信效度分析属于什么研究方法
信效度分析属于调查研究方法。
信效度分析问卷调查法是研究中广泛采用的一种调查方法,根据调查目的设计的调查问卷是问卷调查法获取信息的工具。
⑤ 信度与效度的区别
(1) 信度低,效度不可能高。因为如果测量的数据不准确,也并不能有效地说明所研究的对象。
(2) 信度高,效度未必高。例如,如果我们准确地测量出某人的经济收入,也未必能够说明他的消费水平。
(3) 效度低,信度很可能高。例如,即是一项研究未能说明社会流动的原因,但它很有可能很精确很可靠地调查各个时期各种类型的人的流动数量。
(4) 效度高,信度也必然高。
(5)信度分析和效度分析是研究方法吗扩展阅读
信度是指测验结果的一致性、稳定性及可靠性,一般多以内部一致性来加以表示该测验信度的高低。信度系数愈高即表示该测验的结果愈一致、稳定与可靠。系统误差对信度没什么影响,因为系统误差总是以相同的方式影响测量值的,因此不会造成不一致性。反之,随机误差可能导致不一致性,从而降低信度。
信度(reliability)即可靠性,它指的是采取同样的方法对同一对象重复进行测量时,其所得结果相一致的程度。从另一方面来说,信度就是指测量数据的可靠程度。
举例而言,对于“图书馆利用情况及满意度调查问卷”的第一部分第1题,若对同一个人相隔3天,问同一个问题,若第一次回答,被调查者选择A、第二次回答选择C、第三次回答选择D,则说明对于该问题调查结果的信度低,因为调查结果的差异较大。若三次都选择相同的答案或者差异较小的答案,则在排除系统误差的条件下,说明调查结果的信度较高。
效度(Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。效度是指所测量到的结果反映所想要考察内容的程度,测量结果与要考察的内容越吻合,则效度越高;反之,则效度越低。效度分为三种类型:内容效度、准则效度和结构效度。
效度是测量的有效性程度,即测量工具确能测出其所要测量特质的程度,或者简单地说是指一个测验的准确性、有用性。效度是科学的测量工具所必须具备的最重要的条件。在社会测量中,对作为测量工具的问卷或量表的效度要求较高。鉴别效度须明确测量的目的与范围,考虑所要测量的内容并分析其性质与特征,检查测量的内容是否与测量的目的相符,进而判断测量结果是否反映了所要测量的特质的程度;
⑥ 什么叫信度分析什么叫效度分析
信度分析也称为可靠性分析,用于测量样本回答结果是否可靠,即样本有没有真实作答量表类题项。
比如说,在对同一对象进行测量,多次测量结果都很接近,就会认为这个结果是可信的,真实的,也就是信度高。如果每次测量的结果都有很大的差异,则说明信度较低。
信度种类:克隆巴赫α系数、折半系数、重测信度,复本信度。
效度分析,简单来说就是问卷设计的有效性、准确程度,用于测量题项设计是否合理。
效度种类:内容效度、结构效度和效标效度。
1、内容效度,通常是以文字来说明问卷的有效性。如通过参考文献,或者权威来源说明问卷的权威性和有效性。还有就是通过对问卷前测并结合结果进行题项的修正等工作来充分说明问卷的有效性。
2、结构效度,指测量题项与测量维度之间的对应关系。测量方法有两种,一种是探索性因子分析,另外一种是验证性因子分析。其中,探索性因子分析是当前使用最为广泛的结构效度测量方法,SPSSAU提供此两种分析方法。
3、效标效度,如果以前有一份权威且标准的量表数据,现在依旧使用该量表进行研究,并且收集回来一份数据。以前权威标准数据作为标准,当前数据与前一份数据之间进行相关分析,如果说相关系数值较高,则说明效标效度良好。但在实际分析中,效标效度很少使用。
SPSSAU-信效度分析
⑦ 信度和效度的关系
1、评价定义不同:信度是表明评价工具质量的重要指标,主要指测验结果的前后一致性程度;而效度是指一个测验或测量工具能真实地测量出所要测量的事物的程度。
2、估计对象不同:效度是对测量的准确性程度的估计,而信度则是对测量的一致性或可靠性程度的估计。研究表明,效度和信度是交叠的,即有时一个测量工具对于某一个目的具有一定的信度,但并不一定是有效的;而一个测量工具如果对于某一个目的是有效的,那么它一定是可信的。
3、两者分析方法不同:信度分析的常用具体方法有重测信度、复本信度、分半信度法等,效度的分析方法有专家判断法 、统计分析法(评分者信度\复本信度\折半信度\再测法)、经验推测法 (实验检验)等。
4、两者的前提不同:一般来说,信度是效度的必要条件,也就是说,效度都必须建立在信度的基础上;但是没有效度的测量,即使它的信度再高,这样的测量也是没有意义的。他们两者之间的关系是信度高效度不一定高、效度高信度高、信度低效度一定低、效度低信度不一定低。
⑧ 如何对调查问卷进行效度和信度分析
在SPSS中,专门用来进行测验信度分析的模块为Scale下的Reliability Analysis;使用Data Rection之下的Factor模块,可以利用因素分析的方法来进行测验的建构效度检验;至于项目分析则没有专门的模块可以之间进行计算分析,但是却可以利用Summarize下的Frequencies、Correlate下的Bivariate和Compare Mean下的Independent-Samples T Test来计算几个常用的项目分析指标。 3 m6 ]$ l8 a6 j w% K0 ^ 一、信度分析' M, k! n+ y# C Reliability Analysis模块主要功能是检验测验的信度,主要用来检验折半信度、库李及a系数以及Hoyt信度系数值。至于重测信度和复本信度,只需将样本在二次(份)测验的分数的数据合并到同一数据文件之后,利用Correlate之下的Bivariate求其相关系数,即为重测或复本信度;而评分者信度则就就是使用的Spearman等级相关及Kendall和谐系数。 表1 Reliability Analysis模块的Model选项的参数及对应中文术语3 V O/ m5 i% P; N6 l' a : `. P- I/ c: J9 X/ ~ 关键字 功 能 ; R% v( ?! T8 L) q* L$ ~ Alpha Cronbach a系数 Split-half 折半信度,n是第二分量表的题数 ( e3 N, N6 w4 l% N( d8 A3 c4 ] Guttman Guttman最低下限真实信度法0 o+ n; n/ ^2 d& B Parallel 各题目变异数同质时的最大概率(maximum-likelihood)信度3 Q( _- Z9 }( a Strict parallel 各题目平均数与变异数均同质时的最大概率信度7 p, x- S9 ?; J: p! k 5 H5 i7 h/ l7 Q) Q 表2 Reliability Analysis模块的Statistics部分选项的参数及对应中文术语 - X9 d% L( ~; ^5 L 关键字 功 能 F test Hoyt信度系数4 D3 A9 Y. c, u4 ` Friedman Chi Friedman等级变异数分析及Kendall和谐系数; [ H" S. [- z e Cochran Chi Cochran’s Q检验,适用于答案为二分(如是非题)的量表+ _" z+ v3 I& C2 e& c Hotelling’s T Hotelling’s T2 检验 & g" S5 S' K& t- f Tukey’s Tukey的可加性检验 3 o6 O8 T* B4 `! ^; b1 S- c* o Intraclass 量表内各题目平均数相关系数 + \$ Z9 m! B8 m7 u% k 6 E$ f$ R/ j8 j5 N# V: m 二、效度分析4 d4 ^5 T& @ n6 d' a 0 G, b' T. u9 T7 n" d2 [ 即因素分析的方法。5 ]7 V' m' w4 _1 K 三、项目分析 ( F# S$ r( e; h/ {, @& @5 b# R: p (一)难度 ' z! Y/ I# n0 b7 ? 1、是非题和选择题- a7 k7 f! B+ U( ? 对于是非题、选择题等采用二分法记分的项目,难度通常用通过率来表示,即用答对或通过该题人数的百分比作为指标:P=R/N P-项目的通过率,R答对或通过该项目的人数,N为全体被试人数。 ( ]. X$ k: n- ` f; j; D. r 所涉及SPSS模块:Frequencies。 或用公式:P=(PH+PL)/2 ( ?6 o, h. H: |, I- z a8 _ 所涉及SPSS模块:Rank、Frequencies。- q* l/ x# r% d- S6 j 2、论述题等 难度公式为:! G9 |& e2 i" p6 t# O5 b2 ` # F8 q8 b: E$ y w" ` X-全体被试在某一项目上的平均分,Xmax为该项目的满分。 所涉及的SPSS模块:Compare Means->Means。" p# ^) c4 {( y9 p0 j7 ] 6 u \' w9 y, ^* w (二)区分度; p/ z" v( B% A: d3 W9 q 1、鉴别指数法/ L9 R1 U. G3 \ 计算公式: D=PH-PL ; o' E) {4 n6 G9 F" k( S+ I $ W5 Q# Z" e+ H2 G& G 所涉及SPSS模块:Rank、Frequencies。 2、相关法 通过计算二列相关或点二列相关,以求得某一项目分数与效标分数或测验总分的相关作为该项目的区分度指标。 所涉及的SPSS模块:Correlate->Bivariate。+ Y9 }% C" q& ^" ?, ~6 w 关键在于如何把低分组与高分组的数据分开,具体操作又取决于低分组与高分组划分标准,即是确定比例(如27%)还是在全距中等分(用Rank进行)。 - o- v5 B1 N3 d0 L J; O # ~. e$ \8 o7 _$ J( j2 m6 y: ~ & g4 T4 h( C' O 关于效度分析,即采用因素(因子)分析的方法,其前提是变量类型均为定距或定比,都是连续变量,否则很难进行分析。对问卷进行信度、效度与项目分析讲解比较好的参考是:" B W9 Y+ u N- ^0 V# _ 吴明隆编着,《统计应用实务——问卷分析与应用统计》,科学出版社,2003。, |4 E9 t' o5 v' Z % Q0 v C& o- O3 t F 信度分析:& l2 v- M! _3 e5 [! f) S 学术界普遍采用内部一致性系数(Cronbach's α值),检验数据信度。在spss中的操作程序如下:进spss输入数据,然后选择scale,再选择reliability analysis。注意在分析问卷信度时,要一个一个分析潜在变量。; p0 ]3 w( ?( ^7 j! Y1 w 效度分析: 内容效度是测量内容能够涵盖研究主题的程度。 因子分析的效度分析主要的指标可以看,因子提取的方差累积贡献率,如果因子提取的越少且方差累积率又不低的话(一般如果2个因子达到40%以上的贡献率就算可以的了),就可以认为因子分析的效度还可以。 5 S4 c: p: N9 V6 V6 }, A- P 除此之外,你可以用因子分析里面Descriotives里面KMO和巴特利检验(battele,不知道是不是这样写的),KMO的值如果>0.5,则说明因子分析的效度还行,可以进行因子分析;另外,如果巴特利检验的P<0.001,说明因子的相关系数矩阵非单位矩阵,能够提取最少的因子同时又能解释大部分的方差,即效度可以。 用各变量间的相关检验量表的内容效度,根据各变量与总分的相关是否超过各变量间的相关检验量表的结构效度。 各项变量之间的相关大于.40;各因子分与总分的相关也大于.40,且均大于各项因子之间的相关。表明问卷在本次调查中具有较好的内容效度和结构效度。 S3 h/ t" [) u; i) r% s5 I 具体操作是analyze>correlate>bivariate correlations。
⑨ 问卷调查结束后,需要做信度分析还是效度分析还是可靠性分析有什么区别
信效度都需要分析,信度说白了指的是测试的稳定性,怎么样能够说明稳定,最简单的方式就是用这个测试测同一批人两次,如果两次结果相关高,那么测验就是可信的,有信度的,这个是真正信度的意思,也叫重测信度。由于人们不总是有机会重新测同一批人(同一批人往往过个几周或者几个月你就找不着人了,就无法重测),所以相处了各种代替重测信度的方法,比如复本信度,编制两个平行的测验,分别拿去测同一批人,又比如分半信度,测了同一批人后把测验成绩拆两半求相关。最后就是科隆巴赫alpha系数,这是我们一般求信度是所用的方法,但事实上这个不是测信度,而是看量表的内部一致性,看所有项目间的相关,相关高,alpha系数高的话就认为测验的题目是同质的、相似的,那么如果这个测验拿去做分半,应该是相关很高的,就近似认为信度好。
但信度只是告诉你测验的稳定性,不能保证有效性,就算你的问卷实际测的东西和你本来想测的东西驴唇不对马嘴,只要两次结果一致,那也是信度好,若要看有效性,就要分析效度。效度就是说你多大程度上测到了你想要测的内容。如果说信度是对测验随机误差的测定,那么效度就是对系统误差和随机误差的测定。一般效度检验要检验效标关联效度(真正的效度,通过求你的问卷和另外若干个你觉得应该和你的问卷测量相似内容的问卷的相关来检验)和结构效度(一般用探索性因子分析和验证性因子分析做)
调查前后都可以做,调查前做的目的一般是通过初期的信效度分析来了解你的测验的质量,根据检验结果删掉不好的题目后,形成最终用于调查的测验。
调查后做的目的主要是在报告调查结果的时候告诉别人你的调查结果是稳定的可靠的,让人家相信你的研究有价值。
希望对你有帮助
⑩ 什么叫信度分析和效度分析
信度分析也称为可靠性分析,用于测量样本回答结果是否可靠,即样本有没有真实作答量表类题项。
比如说,在对同一对象进行测量,多次测量结果都很接近,就会认为这个结果是可信的,真实的,也就是信度高。如果每次测量的结果都有很大的差异,则说明信度较低。
衡量信度的方法有很多种,常用的信度系数包括:克隆巴赫α系数、折半系数、重测信度,可在spssau中进行分析。
效度分析,简单来说就是问卷设计的有效性、准确程度,用于测量题项设计是否合理。
效度又可分为内容效度、结构效度和效标效度。
内容效度,通常是以文字来说明问卷的有效性。如通过参考文献,或者权威来源说明问卷的权威性和有效性。还有就是通过对问卷前测并结合结果进行题项的修正等工作来充分说明问卷的有效性。
结构效度,指测量题项与测量维度之间的对应关系。测量方法有两种,一种是探索性因子分析,另外一种是验证性因子分析。其中,探索性因子分析是当前使用最为广泛的结构效度测量方法,SPSSAU提供此两种分析方法。
效标效度,如果以前有一份权威且标准的量表数据,现在依旧使用该量表进行研究,并且收集回来一份数据。以前权威标准数据作为标准,当前数据与前一份数据之间进行相关分析,如果说相关系数值较高,则说明效标效度良好。但在实际分析中,效标效度很少使用。