在社会调查中,人们常常利用含多个项目的量表来测量人们的意见、态度、看法或观念等比较抽象的东西。这就产生了一个问题:所测的数值是否可靠、准确?是否具有适用性?社会测量的信度与效度就是人们对测量的质量进行评估的两个指标。
益派调查网可以免费发布调查问卷,可以免费使用样本。调查问卷包含的题型多种多样,开放题、矩阵题什么的都能做,基本满足论文中设计的数据调查及分析。
问卷调查法是教育研究中广泛采用的一种调查方法,为了保证问卷具有较高的可靠性和有效性,在形成正式问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分析结果筛选问卷题项,调整问卷架构,从而提升问卷的信度和效度。说了这么多,我们先对一些调研小白解释一下,什么是信度和效度?信度:可靠性、一致性或稳定性。比如说,在对同一对象进行测量,多次测量结果都很接近,我们就认为这个结果是可信的,也就是信度高。如果每次测量的结果都有很大的差异,则说明信度较低。效度:正确性程度,效度越高表示测量结果越能显示出所要测量对象的真正特征。他们两的差别在于信度度量的是问卷测量结果是否一致的可靠程度,而不涉及结果是否正确的问题;效度则针对问卷测量的目的,重点考察测量结果的有效性。对于量表来说,效度是首要条件,而信度是效度的必要条件。也就是说有效的问卷必定是可信的问卷,但可信的问卷未必是有效的问卷。了解了定义后,我们来聊一聊检测调查问卷信效度的方法。信度分析(可靠性分析)1. 重测信度法用同样的问卷对同一被测间隔一定时间的重复测试,也可称作测试——再测方法,计算两次测试结果的相关系数。很显然这是稳定系数,即跨时间的一致性。重测信度法适用于事实性的问卷,也可用于不易受环境影响的态度、意见式问卷。由于重测信度需要对同一样本试测两次,而被测容易受到各种事件、活动的影响,所以间隔时间需要适当。较常用者为间隔二星期或一个月。2. 复本信度法 复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的相关系数。复本信度属于等值系数。复本信度法要求两个复本除表述模式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少。3. 折半信度法 折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性系数,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷,常用于态度、意见式问卷的信度分析。进行折半信度分析时,如果量表中含有反意题项,应先将反意题项的得分作逆向处理,以确保各题项得分方向的一致性,然后将全部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数,最后求出整个量表的信度系数。4. α信度系数法 Cronbachα信度系数是目前最常用的信度系数,其公式为︰α=(n/n-1)*(1-(∑Si2)/ST2)其中,n为量表中题项的总数,Si2为第i题得分的题内方差,ST2为全部题项总得分的方差。从公式中可以看出,α系数评价的是量表中各题项得分间的一致性,属于内在一致性系数。这种方法适用于态度、意见式问卷(量表)的信度分析。效度分析1. 单项与总和相关效度分析 也称为内容效度或逻辑效度,指的是测量的内容与测量目标之间是否适合,也可以说是指测量所选择的项目是否“看起来”符合测量的目的和要求。主要依据调查设计人员的主观判断。这种方法用于测量量表的内容效度。内容效度又称表面效度或逻辑效度,它是指所设计的题项能否代表所要测量的内容或主题。对内容效度常采用逻辑分析与统计分析相结合的方法进行评价。2. 准则效度分析 准则效度又称为效标效度或预测效度。准则效度分析是根据已经得到确定的某种理论,选择一种指标或测量工具作为准则,分析问卷题项与准则的联系,若二者相关显著,或者问卷题项对准则的不同取值、特性表现出显著差异,则为有效的题项。评价准则效度的方法是相关分析或差异显著性检验。在调查问卷的效度分析中,选择一个合适的准则往往十分困难,使这种方法的应用受到一定限制。3. 结构效度分析 结构效度是为了说明从量表所获得的结果与设计该量表时所假定的理论之间的符合程度。研究者在设计量表时,通常会事先假定一定的量表结构(n个维度),这种结构是否与测量的数据相符合(是否确定存在上述几个维度),需要进行验证。为了提升调查问卷的质量,进而提升整个研究的价值,问卷的信度和效度分析绝非赘疣蛇足,而是研究过程中必不可少的重要环节。
信度是一份问卷的可信性的程度,就是指多次测量得到结果是否是大体一致的,而不是每次结果出入都很大!效度是指这份问卷是否真实的测量了它要测量的东西。
一份没有信效度的问卷就没有任何参考借鉴价值,更论证不了任何问题,如果导师查的不严那就另说了。必须确保信息的可靠性,有一定权威性的,不能是网上随便网页点开来的文章。比如一些期刊,或者数据库里的文章都是蛮适合的。引文应以原始文献和第一手资料为原则。所有引用别人的观点或文字,无论曾否发表,无论是纸质或电子版,都必须注明出处或加以注释。凡转引文献资料,应如实说明。对已有学术成果的介绍、评论、引用和注释,应力求客观、公允、准确。伪注、伪造、篡改文献和数据等,均属学术不端行为。
在答辩时,可以提到以下三点:1、对于问卷的信度问题,可以说明问卷设计的可重复性和一致性不足,导致问卷在不同时间和不同受试者群体中的表现不稳定,从而影响了研究结果的准确性和可靠性。2、对于问卷的效度问题,可以说明问卷设计的有效性不足,不能准确地衡量所需的研究变量,或者不能反映受试者群体的真实情况,从而影响了研究结果的可解释性和可靠性。3、在回答问题时,可以提出一些改善问卷信度和效度的建议,例如重新设计问卷、增加问卷测试、提高问卷访问率和回答率等。
信度分析,即研究样本数据是否真实可靠,通俗来讲即研究样本是否真实回答各个题项。如果样本没有真实回答,信度肯定不达标,而有时即使样本真实回答,信度也不一定达标。信度分析可以分为四类,分别是:α信度系数、折半信度、复本信度和重测信度。
(1) α信度系数,即内部一致性系数。此类信度分析最为常见,基本上所有问卷信度分析均会使用此类分析。通过软件计算出α信度系数值,并且用其进行信度水平判断。进行此分析前,首先需要对反向题进行反向操作,并且α信度系数的测量通常以最小的维度为准,而非大维度。
一般来讲:α系数最好在以上,之间属于可以接受范围,而分量表的α信度系数希望在以上, 之间可以接受。如果α信度系数低于则考虑修改量表。从α信度系数计算公式来看,维度对应的题项越多,以及样本量越多时,此值会越大。从笔者经验来看,如果某个维度仅由三个或者两个题项组成,并且样本量在200以下时,那么α信度系数通常会较小(低于)。1个题项表达的维度无法进行α信度系数计算。
α信度系数是问卷信度分析中最为常见的分析方法,绝大多数时候使用α信度系数进行信度测量即可,笔者建议使用α信度系数进行问卷信度测量,问卷前测也类似,但问卷前测时会结合CITC和删除某项后的信度系数值进行判断是否修正或者删除题项,通常来讲,CITC值低于,或者删除某项后的信度系数值反而上升左右时应该考虑对题项进行修正或者删除处理。
1、把简单易答的问题放在前面,把复杂难答的问题放在后面。
把能引起被调查者兴趣的问题放在前面,把容易引起他们紧张或产生顾虑的问题放在后面;把被调查者熟悉的问题放在前面,把他们感到生疏的问题放在后面;或者是一般先问行为方面的问题,再问态度、意见、看法方面的问题等等。
2、可以相互检验的问题必须分隔开。可以起到相互检验和相互印证的作用。
3、问卷的长度或者其所包含的问题,一般以受访者能在半小时内完成为宜。
问卷设计注意事项
1、问卷中所提的问题,应围绕研究目的来编制,力求简单、明了,含义准确。不要出现双关语,避免片面和暗示性的语言。
2、问题不要超过被调查者的知识、能力范围。
3、问题排列要有一定的逻辑次序,层次分明。问卷的目的、内容、数据、卷面安排标准答案等都要认真地推敲和设计。
4、调查表上应有留给供人填写答案的足够空间,并编有填写调查单位的名称、填表人的姓名和填表年月日的栏目。
5、为使调查结果更为客观、真实,问卷最好采用匿名回答的方式。
01信度低,效度不可能高因为信度低意味着问卷填写存在着不一致,就不可能反映真实情况,也不可能做到准确测量。02信度高,效度也未必高因为信度仅仅测量的是一致性问题,那么如果问卷填写人都对问卷中问题理解有偏差,那么可能一致性是满足的,也就是信度较高,但问卷也不能反映实际情况。03效度高,信度一定高也就是说,量表本身能反映实际情况,与实际都偏差不大,也就不存在不一致的情况了。
一、信度
1、信度即可靠性,它指的是采取同样的方法对同一对象重复进行测量时,其所得结果相一致的程度。从另一方面来说,信度就是指测量数据的可靠程度。
2、信度是指测验结果的一致性、稳定性及可靠性,一般多以内部一致性来加以表示该测验信度的高低。信度系数愈高即表示该测验的结果愈一致、稳定与可靠。
3、系统误差对信度没什么影响,因为系统误差总是以相同的方式影响测量值的,因此不会造成不一致性。反之,随机误差可能导致不一致性,从而降低信度。
二、效度
1、效度即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。效度是指所测量到的结果反映所想要考察内容的程度,测量结果与要考察的内容越吻合,则效度越高;反之,则效度越低。效度分为三种类型:内容效度、准则效度和结构效度。
2、效度是测量的有效性程度,即测量工具确能测出其所要测量特质的程度,或者简单地说是指一个测验的准确性、有用性。效度是科学的测量工具所必须具备的最重要的条件。
3、在社会测量中,对作为测量工具的问卷或量表的效度要求较高。鉴别效度须明确测量的目的与范围,考虑所要测量的内容并分析其性质与特征,检查测量的内容是否与测量的目的相符,进而判断测量结果是否反映了所要测量的特质的程度。
【测验的效度】:
效度指测验的正确性和有效性,即测验能够测到被测量对象的真实水平的程度。
通俗讲就是,效度指,一个测验能够测得出想要测量的东西。
比如,我想测大家的身高,用卷尺测出身高,这就是效度高。但是,我用体重计测大家的身高,这就是效度低、没效度。
【测验的信度】:
信度指测验的可靠性和多次测量结果的一致性程度。
一个好的测验,测出的数据必须稳定、可靠,多次测量结果要保持一致,这样才让人信服。否则就不可信。
通俗讲,信度就是一次测量很可靠,再测一次,再测10次,结果都是差不多的。
比如,我用试卷测大家的心理学成绩,今天测大家考90分,明天测、后天测,还是90分,这就说明我这份试卷的信度高。
信度分析指采用同样的方法对同一对象重复测量时所得结果的一致性。效度分析是指指测量工具或手段能够准确测出所需测量的事物的程度。
一、信度分析
二、效度分析
【信度和效度的关系和区别】:
(1)信度低,效度不可能高。因为如果测量的数据不准确,也并不能有效地说明所研究的对象。
(2)信度高,效度未必高。例如,如果我们准确地测量出某人的经济收入,也未必能够说明他的消费水平。
(3)效度低,信度很可能高。例如,即是一项研究未能说明社会流动的原因,但它很有可能很精确很可靠地调查各个时期各种类型的人的流动数量。
信度
是指测验结果的一致性、稳定性及可靠性,一般多以内部一致性来加以表示该测验信度的高低。信度系数愈高即表示该测验的结果愈一致、稳定与可靠。系统误差对信度没什么影响,因为系统误差总是以相同的方式影响测量值的,因此不会造成不一致性。反之,随机误差可能导致不一致性,从而降低信度。
在论文写作中,导师常常告诉我们,调研要有信效度检验,那么信度、效度是什么?怎么分析信效度呢? 信度是指测量的可信程度。 我们来看一个比较理想的状态。当我们用一个测量工具,对我们需要测量的对象测量了很多次后,得到的结果都是一样的。这时我们可以说这个测量工具是可以信赖的。 但是现实中,由于随机误差的影响,不可能达到这种状态。 那么我们怎么评估我们的测量工具是可以信赖的呢? 我们可以计算我们用自己的测量工具得到的结果与理想状态的差距。如果差距越小,那么我们的测量工具就越可靠。 这个差距就是信度。 信度有不同的指标,我们只要明白什么时候用什么指标来检验信度就可以了。剩下的计算,统计软件可以帮我们完成,我们只要选择我们需要的计算公式进行计算,就能得出我们想要的结果。 效度则是考察我们使用的测量工具是否能有效度量我们要测量的变量。 较为公认的说法是,效度分为三种:内容效度、校标效度和构念效度。 内容效度指问题的撰写是否能准确反映测量的初衷。 校标效度指测量工具与某个公认的标准的关系是否紧密。(研究目的是测量是否能较为准确地进行预测。) 构念效度指测量工具能测量出的结果和理论预测或理论结论之间的关系是否紧密相关。(研究目的是验证理论用于测量的有效性。)那么文献中经常看到的表面效度,聚合效度,区别效度呢? 表面效度:题项的表述是否明确、清晰、规范。(一般依据专家的意见来检验,具有主观性,不够牢靠。) 构念效度包含区分效度,聚合效度。当测量对象包含较为复杂的相互关系时,需要细化分析了。 区别效度:一个测量中,不同项目得到的测量结果能够得到区分。 聚合效度:测量一个特征的项目中,项目中不同题项应该指向同一相同特征。 那我们具体要怎么做呢? 和信度一样,我们只要了解在什么情况下用什么指标检验效度就好,剩下的计算软件会帮我们完成。在写文章时,我们只要依据自己的问卷或量表,选择合适的信度、效度检验指标,利用软件计算出结果,就可以验证问卷或量表设计是否可信、有效了。
一般要大于说明问卷调查质量比较良好。效度的特征:1、效度具有相对性:任何测验的效度是对一定的目标来说的,或者说测验只有用于与测验目标一致的目的和场合才会有效。所以,在评价测验的效度时,必须考虑效度测验的目的与功能。2、效度具有连续性:测验效度通常用相关系数表示,它只有程度上的不同,而没有“全有”或“全无”的区别。效度是针对测验结果的。
在论文写作中,导师常常告诉我们,调研要有信效度检验,那么信度、效度是什么?怎么分析信效度呢? 信度是指测量的可信程度。 我们来看一个比较理想的状态。当我们用一个测量工具,对我们需要测量的对象测量了很多次后,得到的结果都是一样的。这时我们可以说这个测量工具是可以信赖的。 但是现实中,由于随机误差的影响,不可能达到这种状态。 那么我们怎么评估我们的测量工具是可以信赖的呢? 我们可以计算我们用自己的测量工具得到的结果与理想状态的差距。如果差距越小,那么我们的测量工具就越可靠。 这个差距就是信度。 信度有不同的指标,我们只要明白什么时候用什么指标来检验信度就可以了。剩下的计算,统计软件可以帮我们完成,我们只要选择我们需要的计算公式进行计算,就能得出我们想要的结果。 效度则是考察我们使用的测量工具是否能有效度量我们要测量的变量。 较为公认的说法是,效度分为三种:内容效度、校标效度和构念效度。 内容效度指问题的撰写是否能准确反映测量的初衷。 校标效度指测量工具与某个公认的标准的关系是否紧密。(研究目的是测量是否能较为准确地进行预测。) 构念效度指测量工具能测量出的结果和理论预测或理论结论之间的关系是否紧密相关。(研究目的是验证理论用于测量的有效性。)那么文献中经常看到的表面效度,聚合效度,区别效度呢? 表面效度:题项的表述是否明确、清晰、规范。(一般依据专家的意见来检验,具有主观性,不够牢靠。) 构念效度包含区分效度,聚合效度。当测量对象包含较为复杂的相互关系时,需要细化分析了。 区别效度:一个测量中,不同项目得到的测量结果能够得到区分。 聚合效度:测量一个特征的项目中,项目中不同题项应该指向同一相同特征。 那我们具体要怎么做呢? 和信度一样,我们只要了解在什么情况下用什么指标检验效度就好,剩下的计算软件会帮我们完成。在写文章时,我们只要依据自己的问卷或量表,选择合适的信度、效度检验指标,利用软件计算出结果,就可以验证问卷或量表设计是否可信、有效了。
毕业论文信效度分析要。效度(Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。效度是指所测量到的结果反映所想要考察内容的程度,测量结果与要考察的内容越吻合,则效度越高;反之,则效度越低。效度分为三种类型:内容效度、准则效度和结构效度。