1.问卷的信度与效度是如何检验的?
(一)信度分析
本研究得出整体问卷与各构面之Cronbach's α值分别为0.80及服务补救
整体品质构面为0.81,而其各构念分别为沟通(0.73)授权(0.78)解释(0.76)
补偿(0.72)回馈(0.65)有形性(0.80);满意反应构面为0.74;行为意向构
面为0.71,由此可知各构面的信度都在0.7以上,符合Nunally(1978)及Wortzel
(1979)有关具高信度之判断准则(Cronbach's α值大於0.7),此显示本研
究量表中的问项均具有高程度的内部一致性,因此在信度上仍具可信.
(二)效度分析
1.内容效度
问卷之发展乃由文献探讨整理出相关问项后,再透过问卷
调查,将问卷以传真,邮寄或e-mail方式与专家,学者讨论问卷中各问项之
适当性,再对他们所提出的意见,修正问卷之内容,即形成本研究之最后
的正式问卷.因此,本研究认为经过此一严谨的程序所发展之问卷应以具
有相当程度的内容效度.
2.问卷的效度检验方法是什么?
检验效度的主要指标和方法有:表面效度、准则效度、架构效度。
1、表面效度(Face Validity)。也称为内容效度或逻辑效度,指的是测量的内容与测量目标之间是否适合,也可以说是指测量所选择的项目是否“看起来”符合测量的目的和要求。主要依据调查设计人员的主观判断。
2、准则效度(Criterion Validity)。准则效度是指量表所得到的数据和其他被选择的变量(准则变量)的值相比是否有意义。根据时间跨度的不同,准则效度可分为同时效度和预测效度。
3、建构效度(Construct Validity)。最关心的问题是:量表实际测量的是哪些特征?在评价建构效度时,调研人员要试图解释“量表为什么有效”这一理论问题以及考虑从这一理论问题中能得出什么推论。建构效度包括同质效度、异质效度和语意逻辑效度。
同质效度是指量表测量同一特征的其他测量方法相互关联的程度。异质效度是指量表和测不同特征的测量方法不同但理论上有关特征的测量方法之间相互关联的程度。建构效度指测量工具所能测量到的理论概念的程度,也就是说若将测量工具所得的结果与相同理论下的其他概念相比较,当二者有某种预期的相关性时,就表示这种测量工具具有某种程度的架构效度。
一般来说,问卷调查容易产生误差的原因,来自研究者的因素包括:测量内容不当、情景以及研究者本身的疏忽。来自受访者的因素则可能是由于其年龄、性格、教育程度、社会阶层等,而影响其答题的正确性。研究者透过信度与效度的检验,可以了解问卷本身是否优良,以作为改变修正的根据,避免做出错误的判断。
对于一名科研人员来说,如何成长和发展?如何能够不断推陈出新,逐渐形成自己独特而系统的思想??这里面问题意识是比较重要而关键的。
问题意识形成的首要条件是你要对一切的现象充满着好奇感和浓厚的兴趣,具有较强的观察能力。比如当你下到相关的实践场所时,观察到一定的现象和问题,如:课堂上教师为什么会像是在表演一样?为什么教师在上面兴趣盎然,而下面总有某些学生兴趣索然?就要积极展开一定的思考,多问几个为什么,并结合自己所学的相关教育教学理论,追问一下怎么才会更好?
其次是要具有强调的信息意识。信息资源是得以形成有价值问题的依据,除了实践观察中获得鲜活的感性信息之外,丰富的理论资源也是形成问题的关键。对于确定领域的古今中外所有的研究成果,包括最新的一些提法等都要积累到脑子中,并按照优化的结构将其组织起来,内化于心。对于已有的问题,要学会换一个角度去多多思考,另外也要善于发掘新的尚未研究或还未足够清楚的问题,并及时将这样一些问题作以记录。
再就是要学会思考,包括思考的方法、角度等等。只有能思考并善于思考的人才会一语中的地提出有意义的问题,并能够给出有效解决问题的清晰思路。
在做科研的过程中,随时随处遇到问题及时作以深入思考,相信会有大收获的。
基本的抽样方法主要有两大类:一类是在目标总体中,有意识地选择若干有代表性的单位为样本进行调查研究。这种抽样叫做目标抽样或主观抽样。
目标抽样的方法适用于典型调查或研究。它的特点是作为样本的各单位的代表性,都是由与该研究课题有关的专家来判断和决定的。其结果的可靠性和精确度叶必须依靠这方面的专家来判断和评价。采用目标抽样,可以对总体的有关特性作出推论,也可以对研究所涉及的有关因素加以适当考虑。也可以使已知的样本单位的某些信息在取样时发挥作用。这些都是目标抽样的优点。此外,采用目标抽样在数据收集方面比较方便。但采用目标抽样时,目标总体中各成员被抽取为样本的概率不能用客观方法来计算,因此抽样的误差和精度就无法用客观方法加以评价,这是目标抽样的最大缺点。
另一类是按照随即的原则,从构成目标总体的各成员中抽取样本,叫做随即抽样和概率抽样。随机抽样的最大优点是可以借助概率客观地计算调查结果的可靠性和精确度。而且可以根据实际条件和所要求的精度确定样本的大小。所以在教育科学研究尤其是大规模的评价研究中,应充分了解随机抽样的意义。
简单随机抽样(简称SRS)是随机抽样中最简单而又是最基本的一种。它的特点是采用随机数码表或抽签的办法确定样本,因此各总体成员都保证有相等的抽取概率。
如果抽取的样本数量很大,使用纯粹的简单随机抽样会有很多困难,因此常常可以采用机械随机抽样来代替。
采用简单(或机械)随机抽样的好处是,可以根据概率理论来客观地估计抽样误差的大小。
3.问卷调查信度分析结果在论文中如何报告?效度分析(因子分析)结果
那要看你做的内容是什么,如果你的问卷中的四个维度同质性很高,那么我们通常只报告整体的Cronbach's Alpha系数。比如一份语言测试(单一能力测验),那么就不需要报告每个部分的Cronbach's Alpha了。
但是如果不是,比如是人格测验,那么通常是要报告每个分测验和总的Cronbach's Alpha。不过你放心,一般这个信度指标和题目数量有关,也就是说题目越多,信度就越高。所以总体的指标一定不会低于单个分测验的。
另外,测验当然要做效度分析了。既然你的问卷结构已经确定,建议你做验证性因素分析,可以用结构方程模型做,具体工具推荐AMOS。
4.什么是调查的信度和效度
调查中需要借助一些工具来进行,比如量表、问卷。
量表一般是已经编制好了,合适时就按要求去使用,而问卷往往需要根据实际情况自行编制,这里就有测量是否准确有效的问题。我们把按一定的规则,将研究对象所具有的属性和特征用一组符号或数字表示出来叫做社会测量,而社会测量就有信度和效度的问题。
信度社会测量的信度是指社会测量活动中测量主体运用某一确定的测量手段重复测量同一对象时测量值的前后一致程度,即测量结果反映测量对象实际情况的可靠性或稳定性。例如用同一架磅秤去称一件东西,几次得到的都是相同的重量,就说明这架磅秤信度很高;如称几次结果都不同,则意味着信度很低,说明测量工具或测量方法有问题,不可信。
效度社会测量的效度,是指在社会测量活动中,测量主体运用某一测量手段所获得的测量结果的恰当、准确、有效的程度。例如某机关公开招聘、通过考核任用干部,如果考试内容不能如实地反映招聘职位的要求,或是试卷分数不能反映应试者的真实水平,那么这种考试就是无效的。
影响社会调查信度、效度的因素调查研究要真实、准确、可靠地反映所要调查的社会现象,最主要的是提高调查资料的信度和效度。通常影响资料的信度和效度的因素主要有:(1)调查者。
调查者的理论水平、实践经验、工作态度、工作作风会影响调查资料的信度和效度。是否有实事求是的科学态度尤为重要。
比如调查者没有使调查对象明了调查目的和内容;在实地调查时,当所选定的调查对象不在现场而让人代替;或者由于某种原因给予调查对象一定的暗示或“启发”,都会在一定程度上降低资料的信度和效度。(2)测量工具。
调查问卷中表述问题的语言不通俗、不清晰,令调查对象感到模棱两可;调查内容不能准确地反映调查目的,即与调查目的关系不大甚至无关的内容较多,而跟调查目的密切相关的内容又设计不全面;调查问题提得太笼统、调查中使用的概念不清楚;问题的答案不是互斥而是交叉重合等,都会使调查得不到真实的、准确的、前后一致的回答,从而影响调查资料的信度。(3)调查对象。
被调查者对调查工作的认识状况、合作程度、对问题的理解和回答能力会直接影响调查的信度和效度。调查对象可能有某种顾虑而抱着敷衍了事的态度,或者因为某种原因,对涉及个人的思想观念、态度、意见之类的问题作不实的回答;而问题超出被调查人的经验范围,也会令调查收集到无效的资料。
(4)调查环境及其他因素。调查时的环境,外界因素的干扰,在资料的编码、登录、输入计算机的过程中,每一步骤都可能出现疏忽或差错,导致调查资料的信度和效度的降低。
一个优良的测量指标必须同时具有信度和效度,是信度和效度的有机统一。只有这样,才能保证调查得来的资料是可靠的和有用的。
我们在对青年进行调查时,也必须具有较高的信度和效度,这样的社会调查才有意义。
5.如何做量表的信度和效度检验
信度的检验方法 :重测信度法、复本信度法、折半信度法、α信度系数法。
效度的检验方法 :内容效度、构想效度、效标效度。
1、重测信度法
这一方法是用同样的问卷对同一组被调查者间隔一定时间重复施测,计算两次施测结果的相关系数。显然,重测信度属于稳定系数。
重测信度法特别适用于事实式问卷,如性别、出生年月等在两次施测中不应有任何差异,大多数被调查者的兴趣、爱好、习惯等在短时间内也不会有十分明显的变化。
2、复本信度法
复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的相关系数。复本信度属于等值系数。
复本信度法要求两个复本除表述方式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少。
3、折半信度法
折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性系数,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷(如年龄与性别无法相比),常用于态度、意见式问卷的信度分析。
4、α信度系数法
Cronbach α信度系数是目前最常用的信度系数,其公式为:α=(k/(k-1))*(1-(∑Si^2)/ST^2)
其中,K为量表中题项的总数, Si^2为第i题得分的题内方差, ST^2为全部题项总得分的方差。从公式中可以看出,α系数评价的是量表中各题项得分间的一致性,属于内在一致性系数。这种方法适用于态度、意见式问卷(量表)的信度分析。
总量表的信度系数最好在0.8以上,0.7-0.8之间可以接受;分量表的信度系数最好在0.7以上,0.6-0.7还可以接受。Cronbach 's alpha系数如果在0.6以下就要考虑重新编问卷。
5、内容效度
内容效度经常与表面效度(face validity)混淆。表面效度是由外行对测验作表面上的检查确定的,它不反映测验实际测量的东西,只是指测验表面上看来好像是测量所要测的东西;内容效度是由够资格的判断者(专家)详尽地、系统地对测验作评价而建立的。
6、构想效度
对测验本身的分析,测验间的相互比较:相容效度(与已成熟的相同测验间的比较)、区分效度(与近似或应区分测验间的比较)、因素分析法,效标效度的研究证明,实验法和观察法证实。
7、效标效度
效标,即衡量测验有效性的参照标准,指的是可以直接而且独立测量的我们感兴趣的行为。我们感兴趣的行为,就是要预测的行为,这是一个总的观念,故必须以可操作的测量来确定才有实际意义。
因此有必要把效标细分为两个层次,其一是理论水平的“观念效标”,其二是操作定义水平的“效标测量”。
扩展资料:
效度和信度的关系可以用测量值的构成公式O=T S R来理解。
如果测量是完全有效的,即0=T,S=0,R=0,此时测量必然是完全可信的,若量表的信度不足,它也不可能完全有效,因为有O=T R。
如果量表是完全可信的,可以达到完全有效,也可能达不到,因为有可能存在导致误差,虽然缺乏信度必然缺乏效度,但信度的大小并不能体现效度的大小。
信度是效度的必要条件,但不是充分条件。从理论的角度来看,量应具有足够的效度和信度;从实践的观点来看,一个好的量表还应该具有实用性。实用性指量表的经济性、便利性和可解释性。
一般来说,信度是效度的必要条件,也就是说,效度都必须建立在信度的基础上;但是没有效度的测量,即使它的信度再高,这样的测量也是没有意义的。
参考资料:
搜狗百科-信度分析
搜狗百科-信度
搜狗百科-效度
6.如何对调查问卷进行效度和信度分析
在SPSS中,专门用来进行测验信度分析的模块为Scale下的Reliability Analysis;使用Data Reduction之下的Factor模块,可以利用因素分析的方法来进行测验的建构效度检验;至于项目分析则没有专门的模块可以之间进行计算分析,但是却可以利用Summarize下的Frequencies、Correlate下的Bivariate和Compare Mean下的Independent-Samples T Test来计算几个常用的项目分析指标。
3 m6 ]$ l8 a6 j w% K0 ^ 一、信度分析' M, k! n+ y# C Reliability Analysis模块主要功能是检验测验的信度,主要用来检验折半信度、库李及a系数以及Hoyt信度系数值。至于重测信度和复本信度,只需将样本在二次(份)测验的分数的数据合并到同一数据文件之后,利用Correlate之下的Bivariate求其相关系数,即为重测或复本信度;而评分者信度则就就是使用的Spearman等级相关及Kendall和谐系数。
表1 Reliability Analysis模块的Model选项的参数及对应中文术语3 V O/ m5 i% P; N6 l' a: `. P- I/ c: J9 X/ ~ 关键字 功 能; R% v( ?! T8 L) q* L$ ~ Alpha Cronbach a系数 Split-half 折半信度,n是第二分量表的题数( e3 N, N6 w4 l% N( d8 A3 c4 ] Guttman Guttman最低下限真实信度法0 o+ n; n/ ^2 d& B Parallel 各题目变异数同质时的最大概率(maximum-likelihood)信度3 Q( _- Z9 }( a Strict parallel 各题目平均数与变异数均同质时的最大概率信度7 p, x- S9 ?; J: p! k5 H5 i7 h/ l7 Q) Q 表2 Reliability Analysis模块的Statistics部分选项的参数及对应中文术语- X9 d% L( ~; ^5 L 关键字 功 能 F test Hoyt信度系数4 D3 A9 Y. c, u4 ` Friedman Chi Friedman等级变异数分析及Kendall和谐系数; [ H" S. [- z e Cochran Chi Cochran's Q检验,适用于答案为二分(如是非题)的量表+ _" z+ v3 I& C2 e& c Hotelling's T Hotelling's T2 检验& g" S5 S' K& t- f Tukey's Tukey的可加性检验3 o6 O8 T* B4 `! ^; b1 S- c* o Intraclass 量表内各题目平均数相关系数+ \$ Z9 m! B8 m7 u% k6 E$ f$ R/ j8 j5 N# V: m 二、效度分析4 d4 ^5 T& @ n6 d' a0 G, b' T. u9 T7 n" d2 [ 即因素分析的方法。5 ]7 V' m' w4 _1 K 三、项目分析( F# S$ r( e; h/ {, @& @5 b# R: p (一)难度' z! Y/ I# n0 b7 ?1、是非题和选择题- a7 k7 f! B+ U( ?对于是非题、选择题等采用二分法记分的项目,难度通常用通过率来表示,即用答对或通过该题人数的百分比作为指标:P=R/N P-项目的通过率,R答对或通过该项目的人数,N为全体被试人数。
( ]. X$ k: n- ` f; j; D. r 所涉及SPSS模块:Frequencies。或用公式:P=(PH+PL)/2 ( ?6 o, h. H: |, I- z a8 _ 所涉及SPSS模块:Rank、Frequencies。
- q* l/ x# r% d- S6 j2、论述题等 难度公式为:! G9 |& e2 i" p6 t# O5 b2 `# F8 q8 b: E$ y w" ` X-全体被试在某一项目上的平均分,Xmax为该项目的满分。所涉及的SPSS模块:Compare Means->Means。
" p# ^) c4 {( y9 p0 j7 ]6 u \' w9 y, ^* w (二)区分度; p/ z" v( B% A: d3 W9 q1、鉴别指数法/ L9 R1 U. G3 \ 计算公式: D=PH-PL ; o' E) {4 n6 G9 F" k( S+ I$ W5 Q# Z" e+ H2 G& G 所涉及SPSS模块:Rank、Frequencies。2、相关法 通过计算二列相关或点二列相关,以求得某一项目分数与效标分数或测验总分的相关作为该项目的区分度指标。
所涉及的SPSS模块:Correlate->Bivariate。+ Y9 }% C" q& ^" ?, ~6 w 关键在于如何把低分组与高分组的数据分开,具体操作又取决于低分组与高分组划分标准,即是确定比例(如27%)还是在全距中等分(用Rank进行)。
- o- v5 B1 N3 d0 L J; O# ~. e$ \8 o7 _$ J( j2 m6 y: ~& g4 T4 h( C' O 关于效度分析,即采用因素(因子)分析的方法,其前提是变量类型均为定距或定比,都是连续变量,否则很难进行分析。对问卷进行信度、效度与项目分析讲解比较好的参考是:" B W9 Y+ u N- ^0 V# _ 吴明隆编著,《统计应用实务——问卷分析与应用统计》,科学出版社,2003。
, |4 E9 t' o5 v' Z% Q0 v C& o- O3 t F 信度分析:& l2 v- M! _3 e5 [! f) S 学术界普遍采用内部一致性系数(Cronbach's α值),检验数据信度。在spss中的操作程序如下:进spss输入数据,然后选择scale,再选择reliability analysis。
注意在分析问卷信度时,要一个一个分析潜在变量。; p0 ]3 w( ?( ^7 j! Y1 w 效度分析:内容效度是测量内容能够涵盖研究主题的程度。
因子分析的效度分析主要的指标可以看,因子提取的方差累积贡献率,如果因子提取的越少且方差累积率又不低的话(一般如果2个因子达到40%以上的贡献率就算可以的了),就可以认为因子分析的效度还可以。5 S4 c: p: N9 V6 V6 }, A- P 除此之外,你可以用因子分析里面Descriotives里面KMO和巴特利检验(battele,不知道是不是这样写的),KMO的值如果>0.5,则说明因子分析的效度还行,可以进行因子分析;另外,如果巴特利检验的P<0.001,说明因子的相关系数矩阵非单位矩阵,能够提取最少的因子同时又能解释大部分的方差,即效度可以。
用各变量间的相关检验量表的内容效度,根据各变量与总分的相关是否超过各变量间的相关检验量表的结构效度。 各项变量之间的相关大于.40;各因子分与总分的相关也大于.40,且。
转载请注明出处众文网 » 毕业论文调查问卷信度效度检验(问卷的信度与效度是如何检验的?)