46【2007】信度分析在调查问卷设计中的应用_张虎

更新时间:2023-07-19 13:40:01 阅读量: 实用文档 文档下载

说明:文章内容仅供预览,部分内容可能不全。下载后的文档,内容与下面显示的完全一致。下载之前请确认下面内容是否您想要的,是否完整无缺。

信度分析在调查问卷设计中的应用

虎,田茂峰

(中南财经政法大学信息学院,武汉430060)

摘要:信度的概念来源于心理测试中关于测验人的能力、人格、技能等测验的可靠性的研究。在

态度”、“偏好”、“感觉”等等。为此需社会调查研究中,也常常涉及到需要测量一些比较抽象的量,例如“

要围绕有关的研究目的或者主题设计合理的问卷,这就涉及到问卷设计的信度分析问题。信度分析能够指导问卷设计者事先对所设计的问卷的是否有效的测度问题有一个大致的了解,以决定是否要重新设计问卷。本文在这方面做了初步研究。

关键词:信度;信度分析系数;克朗巴哈系数中图分类号:O213

文献标识码:A

文章编号:1002-6487(2007)21-0025-03

下特性:信度是指测验所得到结果的一致性或稳定性,而非

1信度分析问题的提出

信度分析是一种测度综合评价体系是否具有一定稳定

测验或量表本身;信度值是指在某一特定类型下的一致性,非泛指一般的一致性,信度系数会因不同时间、不同受试者或不同评分者而出现不同的结果;信度是效度的必要条件,非充分条件。信度低效度一定低,但信度高未必表示效度也高;信度检验完全依赖于统计方法。量表的信度分析包括内在信度分析和外在信度分析。内在信度分析重在考察一组评估项目是否测量的是同一个特征,这些项目之间是否具有较高的内在一致性。内在信度高意味着一组评估项目的一致程度高,相应的评估项目有意义,所得评估结果可信;外在信度分析是指不同时间对同批被评估的对象实施重复测量时,评估结果是否具有一致性。如果两次评估结果相关性较高,则说明在被评估对象没有故意隐瞒的前提下,评估项目的概念和内容是清晰的、不模糊的,没有二义性的,因而所得的评估结果是可信的。由于客户满意度数据的取得和测量是通过事先设计的问卷和量表对客户对产品和服务的满意度和忠诚度进行量化的,所以可以通过内在信度分析来检验调查问卷的信度进行检验,而不必进行外在信度的检验。在问卷调查中的信度分析处于十分重要的环节,问卷设计出来后对问卷进行预调查,得到一些预调查的数据,通过对预调查数据的信度分析可以清楚地知道问卷设计的量表是否是真正地满足了搜集信息的需要。如果信度分析通不过,那么就要对问卷的量表进行重新设计,再进行数据预调查直到信度分析经过检验。

性和可靠性的有效分析方法。在社会生活或经济管理活动例如,中,对某个体或某事物做综合评价是极为普遍的问题。汽车驾驶培训学校在学习结束时要对学员的汽车驾驶能力进行综合考核;学期末要对学生掌握对某门课程掌握的程度进行全面的考核;心理咨询中心要对来访者的心理状况进行综合评分;挑选国家运动员要对运动员的条件进行全面的评估等社会现象都需要用到对被观测对象的综合评价问题。

综合评价必然会涉及如何对被评估对象实施综合评价的问题,通常的做法就是使用编制量表来对被观测对象进行评价。所谓编制量表就是围绕评估的总体目标,将其分解为若干不同的方面,它们是由总体目标的不同特征组成的,不同的项目是对某个特征的不同角度或不同层面的描述。评估者通过计算被评估对象的某个方面得分的汇总,实现对特定特征的评估,最后通过各个方面的得分的再加总得到最后的评估结果。

量表编制的合理性和有效性将决定着评估结果的可信性和可用性。量表的合理性主要是指,所设置的评估项目在内容上是否全面完整,总体结构是否合理。量表的有效性是指,针对某个特定特征设置的评估项目只是对该特征的部分反映,适时地更新评估项目在实际的调查研究中是合理的和必要的。有效的量表应能保证评估项目更新前后所得的评估结果有较高的相关性。否则,如果差异较大,则意味着所设置的评估项目可能并非是对同一个特征的测度,评估项目可能无法达到预期的考察目的。如果诸多项目是对同一个特征的测度,那么所获得的测试结果应该具有较高的一致性。

—信度进行研究。信信度分析正是要对量表的有效性——

度是指根据测验工具所得到的结果的一致性或稳定性,反映被测特征真实程度的指标。一般而言,两次或两个测验的结果愈是一致,则误差愈小,所得的信度愈高。信度分析具有以

2信度分析的基本原理

在社会调查中,为了从现象深入地研究一些本质性的或者

理论性的问题,研究者除了设计询问一般的事实外,常常还设态计询问有关意见或者态度的问题,以测量某种较为抽象的“度”、“看法”、“观念”等一类的问题。这就产生了一个问题:所测得到的数值是否可靠、准确?即是否可以看成是被调查者的“真实态度”的可靠、准确度量,这就涉及到测量的信度问题。

统计与决策2007年第21期(总第249期)

25

信度的概念:如果用T表示真实的分数,B表示偏差分数即系统误差,E表示测量误差即随机误差,X表示按问卷测到的实际得分(即观测分数),那么

X=T+B+E

(1)

真实的分数是一个抽象的概念,或说是一个潜在的变量,实测中得到的观测量X与T之间不可能完全一致,总会有误差的。其中,随机误差是无法避免的,系统误差应该尽可能的避免或者减少。由于在实际问卷调查中,系统误差很难分解,因此也有一些参考书中的分解式将系统误差包括在真值之中,即将表达式X=T+B+E简单地写为X=T+E,对于测量误差,一般假定它的期望值为0,且与真实的分数相互独立。在此假定之下,可以证明:

①真实得分与测量得分的总体均值相等;

②测量得分的方差σX2等于真实得分的方差σT2

与误差σE

2方差之和,用公式表示即得:E(X)=E(T)

(2)σX

2=σT

2+σ

2(3)

信度一般规定为是真实分数的方差在总的方差中所占的比例,即

信度=σT21-σE

24)

X(X

或者定义为信度=

公式(4!

T(5)

)将信度表示成是一种相关系数的形式:真实分数与实际得分之间的相关;而公式(5)将信度表示成一种变差的比例,是相关系数的平方,或者看成是真实分数和实际得分之间的决定系数。它与回归的方差分析中引进的决定系数是十分相似的。

SPSS软件的信度分析主要用于对量表内在的信度进行

研究。它首先对各个评估项目做基本的描述统计、计算各个项目的简单相关系数以及剔除一个项目后其余项目间的相关系数,对内在信度进行初步分析。然后采用各种信度分析系数对内在信度或外在信度做进一步的研究。信度系数主要包括克朗巴哈(Cronbach)系数、折半(Split—half)信度系数等。下面详细介绍这两种系数:

2.1克朗巴哈(Cronbach)α系数

克朗巴哈系数用于测度量表内部的一致性,其计算方法

是:计算各评估项目的相关系数矩阵,并计算相关系数的均值。

计算克朗巴哈α系数,其数学定义为:

α=

kr

"(6)

1+(k-1)r

"其中,k为评估项目数,为k个项目相关系数的均值,

克朗巴哈α系数在0-1之间。由上面的数学定义可知,克朗巴哈α系数将会受评估项目数以及相关系数均值的影响。当评估项目数为定值时,如果相关系数的均值较高,则认为该项目的内在信度较低,此时克朗巴哈α系数也较低,接近于0。

因此,可以通过克朗巴哈α系数的大小评价内在的信度的高低。经验上,如果克朗巴哈系数大于0.9,则认为量表的内在信度很高;如果克朗巴哈系数大于0.7小于0.8,则可以认为

统计与决策2007年第21期(总第249期)

量表设计存在问题,但是仍有一定参考价值;如果克朗巴哈系数小于0.7,则认为量表设计上存在很大问题应该重新设计。

但是不容忽视的问题是,式(6)也说明,当相关系数的均

值一定时,如果项目数为10,克朗巴哈系数为0.71。但是如果项目数为20则克朗巴哈系数会升至0.81。

可见,项目数较大时,即使相关系数的均值较低,也会得到较高的克朗巴哈系数。此时,克朗巴哈系数存在扩大内在信度的趋势。因此有时候应结合其他指标进行综合分析。

另外,还可以计算剔除的克朗巴哈系数。剔除的克朗巴哈系数是指将某个评估项目剔除后的相关系数的均值。如果剔除的克朗巴哈系数较剔除强的克朗巴哈系数有显著的提高,则说明所剔除的评估项目与其他项目的相关性较低,正是由于剔除了该项目才使得其他项目的总体相关性得以提高。

2.2折半信度系数

折半信度系数主要用于外在信度的评价,同时也用在内在

信度方面。其基本思路是将评估量表一分为二后分别计算两部分的克朗巴哈α系数——这里称之为折半信度系数,进而对两部分量表的信度进行比较。通常,在做量表的外在信度分析时,可以将特定的被评估对象群分为前后两次的评估项目得分横向合并在一起,然后计算折半信度系数;在做量表的内在信度分析时,在评估项目较多时也可以计算折半信度系数。

另外,两部分量表间相关程度的评估也是折半信度分析

中的重要内容。其主要目的是分析两部分量表间是否存在共性。在外在信度分析中,通过分析两次评估结果的相关性来判断是否存在概念模糊和二义性等问题;在内在信度分析中,则主要研究如果仅对被评估对象进行一半的项目评估其可靠性有多大。具体步骤是:

①对每个被评估对象,分别计算在两部分评估项目上的

总得分;

②计算上述总分的简单相关系数,记为rxx;

③评估项目较少时rxx有一定的偏差,需要进行修正。如

果两部分的评估项目同样多,则采用Spearman-Brown修正方法,如下面的表达式:

rxxΔ=2rxx

(7)

xx

如果两部分的评估项目数不同,rxx从方差的角度定义为:

r2xx=2(1-S1+S2

)(8)其中,S12、S22、S分别为第一部分总评分的方差、第二部

分总评分的方差、两部分的总方差。以上的折半信度法和克朗巴哈α系数所分析的实际上都是量表内部的一致性,前者指的是两个半量表所测分数间的一致性,后者指的是量表中

每一个题目得分之间一致性。

3以某移动通讯公司关于客户满意度问卷

为例进行调查数据的信度分析

信度分析用于评价量表的稳定性或可靠性,具体来说就是利用问卷事先设计的量表对事先想要测度的事物进行重复测量时,所得结果的一致性。以上已经介绍了信度分析的相关理论和基本原理。下面使用统计软件SPSS14.0对某移动

26

通讯公司关于客户满意度问卷所搜集到的量表数据进行问卷量表的信度分析———即评价各个问卷中问题是否测量的是同一个概念。

某移动通讯公司关于客户满意度的调查访问是通过计算机辅助电话访问(简称为CATI)的形式来完成的,其所获得的统计数据是一手数据———原始数据是指直接从各个调查单位搜集的,尚未经过整理的统计数据资料。由于事先不知道问卷设计是否满足了调查的需要,所以在实际调查之前采用了信度分析对预调查的94份有效问卷进行了信度分析。首先介绍一下CATI访问的涵义。

通话质量漫游服务新业务促销活动业务咨询业务办理售后服务费用交纳投诉处理通话价格客户满意度忠诚度理性因素感性因素表2

客户满意度忠诚度测量因素信度表

项目被删除后的尺度均数(ScaleMeanif

项目被删除后尺度方差

校正项目总相关系数

项目被删除后的α系数

(ScaleVariance(CorrectedItem-(Cronbach'sAlpha

CATI是ComputeraidedTelephoneInterview的缩写形

计算机、访问员式,即计算机辅助电话访问,它是由电话、

三种资源组成一体的访问系统,使用一份按计算机设计方法设计的问卷,用电话向受访者进行访问。CATI是将近年高速发展的通讯技术及计算机信息处理技术应用于传统的电话访问所得到的产物,问世以来得到越来越广泛的应用。此次问卷的量表采用的是李克特五级量表,即:非常好(用5分来表示);很好(用4分来表示);好(用3分来表示);一般(用2分来表示);差(用1分来表示)。此次某移动通讯公司关于客户满意度的问卷主要涉及到影响客户满意度和忠诚度的14个大的方面的问题。这14个问题分别是:通话质量、漫游服务、新业务、促销活动、业务咨询、业务办

ItemDeleted)

46.39146.80246.96046.34946.29646.66546.52846.25446.88647.17042.83045.76046.63545.486ifItemDeleted)Totalcorrelation)

66.8340.53164.5450.56267.0950.46767.0950.52667.2310.45564.7490.63065.5650.51764.5660.62464.1400.54574.0770.22961.0010.55870.8310.36566.1680.91963.1240.952ifItemDeleted)

0.8700.8690.8740.8710.8740.8650.8710.8660.8700.8810.8720.8770.8600.853

计的问题能够满足研究移动通讯客户满意度分析的目的,同时也为以后分析的效度和精度提供了了保证。

4结语

信度分析在问卷调查中有着十分广泛的应用,做好问卷

理、售后服务、费用交纳、投诉处理、通话价格、客户满意度、忠诚度、理性因素、感性因素。

表1是使用某移动通讯公司关于客户满意度的调查问卷所取得的数据利用统计软件SPSS14.0进行信度分析的结果。

表1

克朗巴哈α系数

信度统计量输出表

标准化后的克朗巴哈α系数

问卷的量表测试项目

调查后,接下来为了进一步考察问卷的可靠性与有效性,要信度本身与测量所得结进行信度分析(ReliabilityAnalysis)。

果正确与否无关,它的功能在于检验测量本身是否稳定。在实际的问卷调查分析中对问卷的预调查有十分必要的作用,它可以检验事先设计的调查问卷是否真实地测度了调查员想要了解的资料和数据。毕竟问卷的设计者的想法跟被调查者的真实想法之间存在差距,通过对问卷的预调查结果的信—与整度分析可以找出问卷中的哪个题目设计得有问题——个问卷之间的关联性不大。然后可以对那些与整个问卷的关联性不大的问题进行修改,直到整个问卷的信度达到分析的要求为止。

关于调查问卷可信度评价分析一直是国内进行问卷调查时常常被忽视的问题。问卷设计者往往看中的是资料收集的难易程度以及问卷设计的逻辑方面的问题,很少会通过信度分析来分析问卷的可信度的问题。这是问卷分析员经常忽略的一个问题,忽略信度有可能会使分析的结果发生很大的偏差甚至会得到错误的结论。信度分析可以很好地识别那些与整个问卷关联性不大的量表,为进一步地修改问卷量表提供统计理论依据。

参考文献:

0.8840.89114

上表是SPSS14.0输出的信度统计表格,其中的14说明进行信度分析的项目总共有14个,利用原始数据对整个问卷的所有项目进行信度分析的克朗巴哈α系数(上表中的第一列)为0.884>0.8,利用标准化后的数据进行信度分析的克朗巴哈α系数(上表中的第二列)为0.891>0.8,这两个指标均能够说明:设计的调查问卷从整体上能够有效地测度事先想要搜集的资料信息。此次问卷所设计的量表对客户满意度和忠诚度的度量是有效和可信的,能够满足统计分析的需要。

从SPSS输出的客户满意度忠诚度测量因素信度表(见表2)我们可以看出问卷设计的量表的14项变量的克朗巴哈系数都在0.8以上,说明此次设计的关于用户满意度的问卷中的14个大的方面的问题每一个都是有效的,可信的,问卷的整体信度是合适的且满足统计分析需要。各个项目和总的量表结果的相关系数(表2中的第四列)都是很高的,如果剔除其中的哪一个题目均不会引起克朗巴哈系数发生显著性变化,这也充分说明设计的14个量表项目是满足统计分析要求的。信度分析是对所设计的问卷量表的第一步分析,通过信度分析可以知道事先设计的量表是否准确地度量了所想要收集的资料。通过对以上的某移动通讯公司关于客户满意度问卷调查的信度分析,可以知道此次通过问卷量表设

[1]耿修林,谢兆茹.应用统计学[M].北京:科学出版社,2002.

[2]薛薇.SPSS统计分析方法及应用[M].北京:电子工业出版社,2003.[3]柯惠新,沈浩.调查研究中的统计分析法(第二版)[M].北京:中国传媒大学出版社,2005.

—数据的搜集、整理和分析[M].上海:上海财经[4]孙允平.统计学——大学出版社,2004.

(责任编辑/亦民)

统计与决策2007年第21期(总第249期)

27

本文来源:https://www.bwwdw.com/article/ak71.html

Top