问卷调查法是教育研究中广泛采用的一种调查方法,为了保证问卷具有较高的可靠性和有效性,在形成正式问卷之前,应当对问卷进行试测,并对试测结果进行信度和效度分析,根据分析结果筛选问卷题项,调整问卷架构,从而提升问卷的信度和效度。说了这么多,我们先对一些调研小白解释一下,什么是信度和效度?信度:可靠性、一致性或稳定性。比如说,在对同一对象进行测量,多次测量结果都很接近,我们就认为这个结果是可信的,也就是信度高。如果每次测量的结果都有很大的差异,则说明信度较低。效度:正确性程度,效度越高表示测量结果越能显示出所要测量对象的真正特征。他们两的差别在于信度度量的是问卷测量结果是否一致的可靠程度,而不涉及结果是否正确的问题;效度则针对问卷测量的目的,重点考察测量结果的有效性。对于量表来说,效度是首要条件,而信度是效度的必要条件。也就是说有效的问卷必定是可信的问卷,但可信的问卷未必是有效的问卷。了解了定义后,我们来聊一聊检测调查问卷信效度的方法。信度分析(可靠性分析)1. 重测信度法用同样的问卷对同一被测间隔一定时间的重复测试,也可称作测试——再测方法,计算两次测试结果的相关系数。很显然这是稳定系数,即跨时间的一致性。重测信度法适用于事实性的问卷,也可用于不易受环境影响的态度、意见式问卷。由于重测信度需要对同一样本试测两次,而被测容易受到各种事件、活动的影响,所以间隔时间需要适当。较常用者为间隔二星期或一个月。2. 复本信度法 复本信度法是让同一组被调查者一次填答两份问卷复本,计算两个复本的相关系数。复本信度属于等值系数。复本信度法要求两个复本除表述模式不同外,在内容、格式、难度和对应题项的提问方向等方面要完全一致,而在实际调查中,很难使调查问卷达到这种要求,因此采用这种方法者较少。3. 折半信度法 折半信度法是将调查项目分为两半,计算两半得分的相关系数,进而估计整个量表的信度。折半信度属于内在一致性系数,测量的是两半题项得分间的一致性。这种方法一般不适用于事实式问卷,常用于态度、意见式问卷的信度分析。进行折半信度分析时,如果量表中含有反意题项,应先将反意题项的得分作逆向处理,以确保各题项得分方向的一致性,然后将全部题项按奇偶或前后分为尽可能相等的两半,计算二者的相关系数,最后求出整个量表的信度系数。4. α信度系数法 Cronbachα信度系数是目前最常用的信度系数,其公式为︰α=(n/n-1)*(1-(∑Si2)/ST2)其中,n为量表中题项的总数,Si2为第i题得分的题内方差,ST2为全部题项总得分的方差。从公式中可以看出,α系数评价的是量表中各题项得分间的一致性,属于内在一致性系数。这种方法适用于态度、意见式问卷(量表)的信度分析。效度分析1. 单项与总和相关效度分析 也称为内容效度或逻辑效度,指的是测量的内容与测量目标之间是否适合,也可以说是指测量所选择的项目是否“看起来”符合测量的目的和要求。主要依据调查设计人员的主观判断。这种方法用于测量量表的内容效度。内容效度又称表面效度或逻辑效度,它是指所设计的题项能否代表所要测量的内容或主题。对内容效度常采用逻辑分析与统计分析相结合的方法进行评价。2. 准则效度分析 准则效度又称为效标效度或预测效度。准则效度分析是根据已经得到确定的某种理论,选择一种指标或测量工具作为准则,分析问卷题项与准则的联系,若二者相关显著,或者问卷题项对准则的不同取值、特性表现出显著差异,则为有效的题项。评价准则效度的方法是相关分析或差异显著性检验。在调查问卷的效度分析中,选择一个合适的准则往往十分困难,使这种方法的应用受到一定限制。3. 结构效度分析 结构效度是为了说明从量表所获得的结果与设计该量表时所假定的理论之间的符合程度。研究者在设计量表时,通常会事先假定一定的量表结构(n个维度),这种结构是否与测量的数据相符合(是否确定存在上述几个维度),需要进行验证。为了提升调查问卷的质量,进而提升整个研究的价值,问卷的信度和效度分析绝非赘疣蛇足,而是研究过程中必不可少的重要环节。
一般我们做的所谓信度都是alpha系数,这个指标其实是对你问卷所用的题目的内部一致性,即内部相关的一种检测,相关越高,代表信度越好,那你就要想办法提高项目间的相关。一般就两种法子,第一,增加题目,自己根据理论依据和自己的合理论证给问卷添加符合其概念的题目,好题目(同质的题目)加的越多,信度越好,第二,删题目,把和其他项目明显不一样的题目删掉,也能增加alpha系数值,至于删哪个,你可以根据spss求alpha系数的操作来进行,在spss里面选分析——可靠性分析——然后在对话框里面找到有一项是 如果删除该项目后所得的alpha系数,这个操作会告诉你每个题目删除后alpha系数的变化,这样你就知道该删哪个了,另外也可以根据理论依据,把不符合理论的题目删掉。总而言之,就是增加同质的题目,删掉不同质的题目信度是效度的必要条件,也就是说,要想效度高,首先要信度好,那么提高信度的方法也可以用来提高效度可以说,增删题目是最常见也最有效的方法,本来增加样本容量也是个好办法,不过既然你说没时间,那就没法子了。另外的话,就是去除异常数据,把乱答的找出来,比如全部填同一个答案的,规律作答的,还可以按均值上下3个标准差去除极端值
提升效率:1、精心设计每个指标项,主要包括三个方面的内容:从同问题不同的侧面设计调查指标项;有意识地设计出某些校验项针对同组样本多次则量。2、基于小样本调开数据分析其信度,主要包括四个方面的内容:对相关数据项进行致性检验;总体属性和子属性的一致性检验;复本数据的一致性检验;校验项的致性检验。信度是调研数据与项目评价数据可靠性的重要指标,是数据的可靠程度信度反映的是调研数据的客观性,即针对收集到的数据精心设计每个指标项。
在实施调查过程中,严格的按照调查方案选择调查对象,确定合理的调查时间、地点、环境;以及在调查过程中积极争取调查对象的合作;访问过程中严格按照计划实施等是我们对收集高质量调查数据的保证
能否通过问卷调查收集到准确的、有效的高质量数据,完善的问卷设计是前提,而周密的按照调查方案实施数据收集是保证。此外,对调查结果的正确汇总、整理、分析,以及选用适当的信度和效度检验方法也是我们提高问卷调查数据质量不可或缺的条件。
51调查网,让调查更简单方便!
您是指问卷获得的数据的可信度吗?主要可以从以下几方面来考量:一、样本库线上问卷调研系统会为企业邀请符合条件的目标人群填写问卷,这种样本服务通常是增值服务。调研系统样本库的数量、样本来源、覆盖范围等均会对调研结果的可靠性产生影响。1、样本属性选择:地区、性别、年龄、学历、婚姻状况、职业分布、工作经历、收入状况、指定人群等。2、样本数量及来源:样本数量、问卷填写这、app客户端、合作网站、会员推荐、搜索引擎、社交平台、网站拦截、博客/论坛招募。二、样本质量控制为保证问卷质量过关,不同的问卷调研系统有不同的样本质量控制机制。企业发布者可自主设定样本范围和回收规则,通过平台提供的多重机制保障数据有效性。经过系统审核后,发布者可以手动删除任何主观认定的无效答卷。三、回收分析问卷回收之后,系统会对问卷数据自动作出分析,并以图表(如条形图、饼图或柱状图等)的形式呈现每道题的答题情况,结果直观明了,为企业免去大量的数据统计工作,准确高效。此外,部分平台会提供spss数据分析工具,方便企业对问卷结果进行更深入的分析。
115 浏览 3 回答
215 浏览 2 回答
109 浏览 5 回答
322 浏览 9 回答
214 浏览 4 回答
227 浏览 6 回答
360 浏览 4 回答
275 浏览 2 回答
228 浏览 4 回答
274 浏览 5 回答
225 浏览 7 回答
190 浏览 4 回答
189 浏览 5 回答
135 浏览 2 回答
194 浏览 6 回答
280 浏览 2 回答
131 浏览 6 回答
125 浏览 3 回答
93 浏览 3 回答
261 浏览 6 回答
244 浏览 2 回答
250 浏览 2 回答
134 浏览 7 回答
296 浏览 3 回答