SPSS有话说：你收集的数据有效吗？——效度分析

Original 小明同学 SPSS有话说 2022-04-26

导语

问卷调查中，我们喜欢引用他人的测量工具（量表或问卷）或者根据研究目的和理论编制或修订符合自己需要的工具，为了保证问卷具有较高的可靠性和有效性，在正式分析或形成正式问卷之前,我们会对测量结果进行信效度检验，以保证结果的可靠性和有效性，不然结果非常完美也可能是存在问题的。因此，检验问卷或量表的信度和效度是研究过程中必不可少的重要环节。

SPSS有话说

效度是测量的有效性程度，即测量工具确能测出其所要测量特质的程度，或者简单地说是指一个测验的准确性、有用性。效度是科学的测量工具所必须具备的最重要的条件。在社会测量中，对作为测量工具的问卷或量表的效度要求较高。鉴别效度须明确测量的目的与范围，考虑所要测量的内容并分析其性质与特征，检查测量的内容是否与测量的目的相符，进而判断测量结果是否反映了所要测量的特质的程度。正常情况下，效度分析仅仅针对量表数据，非量表题目比如多选，单选性别之类的题目不能进行效度分析。

效度分类：

（1）内容效度

内容效度是指测量项目对整个测量内容范围的代表程度，即考察测验项目的代表性或对所测量内容取样的适当性，也就是考察测验项目能否切实测量到测验所要测量的目的或行为。例如、基于理论文献综述、开放式问卷调查、知名相关变量和个别访谈几方面综合调查的结果，在问卷测试过程中多次请专家进行审查和修订，基本保证了问卷的有效性和题项能够涵盖拖延各个方面的原因，并具有代表性，基本上反应了当代大学生拖延原因的真实情况。因此，本问卷具有较好的内容效度；通过了理论思考、开放式访谈、成立专业的项目编制小组及专家审核等一系列步骤，保证了量表能够真实的反映青少年情绪调节策略运用的实际情况。量表在编制的过程中，研究者对量表的项目进行过多次审核和修改，因此能够保证量表具有较好的内容效度。

（2）构想效度（结构效度）

构想效度是指测验实际测量到的与所要测量的理论构想或特质之间的符合程度，它是评判测量工具质量的重要标准之一。对构想效度进行检验通常运用两种方法：一是问卷的各维度之间、问卷总体与维度之间的相关程度分析；二是验证性因素分析。

① 总分与各维度之间的相关分析

根据心理测量的相关理论所知，问卷的各个维度之间应存在中等程度的相关关系（表明各因子之间既方向一致，又有所差异，不可互相替代），而各维度与总分的相关应高于各维度之间的相关（说明各因子间既相互联系又有一定的独立性，并与总体概念相一致）。若满足以上两点就可以证明问卷测量的是一个心理特质且各个维度有一定的区分度，结构效度良好。Tuker认为量表各维度与总分的相关在0.3-0.8之间，各维度之间的相关在0.1-0.6之间，则可以认为该问卷结构良好。

② 验证性因素分析

验证性因素分析是考察已有的理论模型和现实调查数据拟合程度的一种验证，是考察量表结构效度的一种十分有效的方法。验证性因素分析是通过检验数据拟合程度来考察结构效度，寻求数据与模型的最佳拟合，检验因素指标的效度与理论构想之间的关系，因此其得到的结果更具确定性。

通过探索性因素分析得到的结果可以进一步通过验证性因素分析确定模型与实际数据的拟合程度，从而检验理论结构的正确性。吴明隆表示，整体模型适配度是否达到标准可从以下四个指标来考查：一是绝对适配统计量，包括卡方值、卡方自由度比（X2/df）、渐进残差均方和平方根（RMSEA）、GFI等；二是增值适配度统计量，如NFI、CFI等；三是简约适配度统计量，如PNFI、临界样本数值CN、省检拟合优度指标（PGFI）等；四是残差分析指标，如标准化残差值和非标准化残差值。

常用的拟合指标标准：①卡方值，该指标值越小，表示整体模型的因果路径图与实际资料拟合度越高。但是该指标容易受样本容量的影响，样本数越大，越容易达到显著，几乎拒绝所有拟合较好的模型。因此，常用的卡方自由度比作为替代性检验指数。；X2/df越小，表示模型的拟合度越好。一般而言，X2/df<3表示模型整体拟合度较好；3<X2/df<5表示模型整体可以接受，但需要改进；X2/df>10表明整体模型非常差。②渐进均方根误差（RMSEA），该指标受样本数量影响较小，是较好的绝对拟合指标。该指标值越小，则模型拟合度越好。一般认为，RMSEA>0.1表示模型拟合度不佳；0.08-0.1表示模型尚可，具有普通适配；0.05-0.08表示模型拟合好；RMSEA<0.05表示模型拟合度非常好。③拟合指标，采用拟合良好性指标（GFI）、常规拟合指数NFI）和比较拟合指标（CFI），调整拟合良好性指标（AGFI）。上述四个拟合指数的数据值都局限于0-1之间，都是越接近1则表示模型的拟合度越好，一般认为它们的值在0.8以上即可认为数据与理论模型的拟合度可以接受。

为了比较模型拟合的优劣，设置了参照模型和构想模型。参照模型是假设量表的所有项目都归属在同一个维度上；构想模型是理论假设的模型，即量表所包含的各维度。

温馨提示

非量表如何进行效度分析?

量表是指类似于“非常不满意，不满意，非常满意”这样的题项，第1个选项用1分表示，第2个选项用2分表示，依次下去，分值越大代表越满意，或者越不满意。只有量表题才能进行效度分析（以及信度分析）。

效度分析用于研究问卷设计是否有效合理，如果是非量表题，则没有办法使用研究方法进行分析，只能使用文字形式进行描述（这种叫内容效度），以证明问卷设计的合理性，建议按以下几点分别说明，从各个角度论证问卷设计的合理性。

第一：用文字描述问卷的设计过程，包括问题设计与思路如何保持一致性；

第二：用文字描述问卷设计的参考依据，比如参考某某文献设计问卷等；

第三：用文字描述问卷设计的过程，比如是否进行过预测试，对问卷进行过哪些修改处理等，修正的原因等；

第四：用文字描述专家或同行的认可性，比如问卷设计经过某指导教授或老师的认可，也或者相关专业人士（比如学长同学等）进行过沟通修改等。

第五：其它可用于论证问卷设计合理的说明等。

信度与效度的关系：

问卷的信度与效度之间既有明显的区别，又存在着相互联系、相互制约的关系。信度主要回答测量结果的一致性、稳定性和可靠性问题；效度主要回答测量结果的有效性和正确性问题。