4.6 问卷评价情况
在正式进行大规模的问卷调查之前,需要进行预测,对整个问卷以及其单个项目做出评价,以确定调查工具的可靠性和有效性。一般情况下,问卷评价包括效度分析、信度分析和项目分析。
效度分析旨在评价测量工具的测量能力,效度是问卷的关键,高效度是高信度的充分条件。对量表结构效度评价的常用方法是因子分析。因子分析的目的是从量表中多个实测问题项中概况和综合出少数几个指标(因子),通过简洁的指标体系,用较少的因子变量来最大限度地概况和解释原有观测信息,反映变量之间的关系。在社会科学研究领域,通常情况下,因子分析需要经过三个基本步骤:
步骤1:对量表数据进行KMO测度和Bartlett球体检验,目的在于告诉我们,对本量表数据进行因子分析是否合适。一般来说,KMO测度的值越接近1,表明变量间的共同因子越多,研究数据适合进行因子分析。对于Bartlett球体检验而言,通常显著水平值越小(<0.05),表明量表中各变量之间存在有意义的关系,即有共同因子的存在,可以肯定因子分析适用于该量表。
步骤2:抽取共同因子,确定因子数目。在社会科学领域中,最常用的确定因子数目的方法是主成分分析法。通常,抽取因子特征值大于或者等于1的主成分作为初始因子,而因子的累计解释方差(累计方差)到达50%及以上就说明该量表中的因子数可以很好地解释整个量表。
步骤3:进行因子旋转,社会科学常用的方法是Varimax旋转(即方差最大旋转),对量表中各因子所包含的题项及其对因子的负荷量和共同因子方差(即共同性)进行检测。因子载荷表示量表中原始变量(题项)和因子变量的相关系数,一般来说,负荷量为0.3或者更大被认为有意义。共同因子方差反映的是量表中各原始变量(题项)可以被因子解释的方差比。通常,变量的共同性数值越高,就表明该因子对量表中相关的题项解释力越好。(https://www.daowen.com)
信度分析即可靠性分析,是对问卷测量结果的稳定性和一致程度的分析。最常使用的信度检测为Cronbach′s Alpha系数。通常,Cronbach′s Alpha系数的值在0.00和1.00之间。系数越高,说明量表的内在一致性越强,测量的结果就越可靠。需要说明的是,信度系数会受到量表项目数和测量内容的影响,因此一般认为信度系数不应低于0.5。如果Cronbach′s Alpha系数不超过0.6,说明量表的内部一致信度不足;Cronbach′s Alpha系数在0.7~0.8时,表示量表具有相当良好的信度;Cronbach′s Alpha系数在0.8~0.9时,说明量表信度非常好。
项目分析的目的在于检验各问卷项所要测量的内容是否具有区分灵敏度。一般情况下,将独立样本T检验分析结果和相关性检验分析结果进行对比。如果两个检测结果完全一致,说明量表中的项目具有良好的区分度。通常,独立样本T检验主要考察Sig.(2-tailed)指标的数值(即双侧T检验的显著性概率),当数值为100%,即0.000时,表示这个变量具有显著差异性。另一个重要指标是95% Confi.Interval of Diff.(即差值95%置信区间),如果置信区间不含0,说明变量上有显著差异。对于相关性检验分析而言,由于测试所有的数据是定序数据,所以采用Spearman相关分析检测。而且,在分析之前并不知道变量之间是正相关还是负相关,所以选择Sig.(2-tailed)指标的数值(双侧显著性检验)来判断相关性,如果p值小于0.05,说明相关系数检测具有统计学意义。
为了评估本次调查所使用的各相关量表,我们首先在西北民族大学进行了调查问卷试测。本次问卷试测共回收问卷514份,其中2013级本科209份、2014级本科238份、2014级预科67份。在清理问卷后,我们剔除了无效问卷52份。无效问卷有三类:(1)非新疆维吾尔族大学生的答卷;(2)问卷各部分答案缺省严重或完全缺省的答卷;(3)问卷各部分的答案几乎或全部相同的答卷。最后可用于分析的有效问卷共有462份,其中2013级本科185份、2014级本科210份、2014级预科67份。根据问卷样本的一般要求,如果希望样本对总体有较好的代表性,最低要求是100例,当样本量不少于200例时,样本有较好的代表性。参与本次评价分析的样本量为462份,远远大于一般要求,因此,参与评价分析的样本量具有非常好的代表性。
依据各量表的具体情况,我们用SPSS 18.0对问卷的第二部分至第六部分的调查数据分别进行了效度分析、信度分析和项目分析。需要指出的是,在对问卷进行评估分析时,SPSS统计输出了大量的表格结果,由于报告篇幅的关系,不可能将所有SPSS输出表格原原本本地全部汇报,因此,报告中的分析结果汇报表均为摘要汇报。