跳转到内容

系统误差

来自VeritasWiki 真理百科
系统误差
英文名 Systematic Error / Bias
学科归属 心理测量、研究方法
核心含义 方向恒定、可重复出现的测量偏差
特征 不随重复测量平均而消失,信度系数无法察觉
主要来源 方法偏差、反应风格、工具偏差、情境偏差
相关条目 随机误差、测量误差、构想效度|}

系统误差指方向恒定、以同样方式重复出现的测量偏差:量表总是把某类被试的真实水平高估三分,或某组被试因作答习惯总是偏低——偏差不随重复而抵消,而是稳定地存在于每一次测量中。

系统误差与随机误差构成测量误差的两大成分,两者的对比可以概括为:随机误差使分数波动(不可预测的偏离),系统误差使分数整体位移(可预测的偏离)。波动损害信度,位移损害效度——信度系数对位移完全无感,这正是系统误差危险的原因。

与随机误差的对照

把两类误差放在同一框架下对比,其性质差异一目了然。

方向:随机误差正负交替、期望为零;系统误差方向恒定、期望不为零。

可平均性:多次测量取平均可以压低随机误差(平均值的随机误差随次数减少);系统误差在平均后原样保留——重复一万次也消不掉。

检测途径:随机误差由信度系数(重测、分半、内部一致性)捕捉;系统误差只能通过效度证据捕捉——与效标的关系是否合理、跨方法是否收敛、跨群体是否等值。

应对策略:随机误差靠标准化程序与多题平均压缩;系统误差靠测量设计(多方法、措辞平衡)与分析校正(方法效应建模)处理,有些成分(如深层的文化偏差)甚至无法在统计上校正,只能靠概念层面的工具修订。

这一对照的实际意义是:研究者面对"测量不准"的诊断,第一步就是判断误差属于哪一类——处方完全不同。

心理学测量中的系统误差

心理学测量的系统误差有几种典型的、被充分研究的形态。

共同方法偏差:自变量与因变量都用同一来源(同一人的自评)测量时,两者相关中混入方法效应。诊断手段包括程序性设计(多来源、多时点)与统计检验(Harman 单因素检验的粗略诊断、标记变量法、多特质多方法模型)。程序性预防优于统计补救——统计方法能校正的部分有限。

社会赞许性:敏感题目(攻击、偏见、物质使用)上的系统性美化。应对包括保证匿名、间接测量技术(内隐联想测验)、随机应答技术、行为指标替代。

作答风格:一贯答"是"的默认倾向、极端作答倾向、 midpoint 倾向。这些风格与构念无关却污染分数,处理手段包括正负向措辞平衡、指令强调、风格分数的统计控制与量化建模。

文化与方法等值问题:量表跨文化翻译后,题目在两种文化中的含义与难度不同,使跨文化均值比较失真。测量等值检验是标准诊断;不等值时需要题目修订而非统计校正。

这些形态的共同点:都产生于测量工具或测量情境与被测构念的系统性错位。正因如此,其解决方案也在设计与工具层面,而不在计算层面。

系统误差与研究结论

系统误差对研究结论的威胁模式与随机误差不同:它不稀释效应,而常常制造效应或掩盖效应。

制造虚假效应:两组测量的方法条件不同(一组施测于安静实验室、一组施测于噪杂教室),组间差异可能全部来自情境系统误差。共同方法偏差则是虚假相关的稳定来源——两个"用同一种方式问出来的"变量相关偏高。

掩盖真实效应:社会赞许性把真实的行为差异压平——所有人都声称同样健康的行为,组间真实差异被抹去。

扭曲方向:工具在某群体的文化含义相反时,跨群体差异可能方向颠倒。

污染纵向结论:不同时点的施测情境差异被误读为发展变化。

识别这些威胁的通用原则是:把"测量的方法条件"当作与"被试特征"同级的变量来对待——谁、何时、何地、用什么版本、以何种指令测量,每一项都可能引入系统位移,都应在设计与报告中写明。方法条件的差异本身,就是需要控制或建模的研究对象。

诊断与校正

系统误差的诊断与校正已形成一套工具组合。

诊断工具:跨方法收敛检验(同一构念用两种方法测量的相关应显著高于跨构念同方法相关);多特质多方法模型的方差分解;标记变量法(用理论上与任何构念无关的方法标记变量估计方法方差);跨群体测量等值检验;与外部效标的关系检验(系统误差使效标相关异常)。

校正手段:方法效应的统计建模(潜变量方法因子);成对差分设计(同一被试两种条件下测量,差分消去个体稳定成分);工具修订(删除跨群体不等值的题目);设计层面的来源分离(数据收集前就把方法方差降到最低)。

需要坦率的边界是:统计校正只能处理被建模的系统误差,而系统误差最危险的形态恰恰是未被发现的那部分。因此任何校正手段都无法替代测量设计的审慎——方法来源的分离、题目的文化预试、施测条件的标准化。方法学界的一句老话在这里适用:最好的统计补救,是那些不需要补救的设计。

与研究设计的连接

系统误差的诊断与设计之间的关系,可以进一步细化为一条设计清单。

来源分离:自变量与因变量的测量来源尽量不同(自评配他评、问卷配行为指标),共同方法偏差在设计阶段就被切断。

时点分离:预测变量与结果变量分时点测量,既保护因果顺序的解释,也稀释情境性系统误差的同步污染。

情境标准化与记录:施测条件标准化之外,把无法标准化的条件(不同校区、不同年份)记录为变量,纳入分析检验其效应。

敏感题目的专门设计:匿名保证、间接措辞、行为替代指标,压缩社会赞许性系统偏差的来源。

跨群体工具预试:任何跨群体比较之前,先做题目层面的文化预试与等值检验。

这一清单的公共逻辑是:系统误差的来源在设计与工具之中,因此对策也在设计与工具之中。统计校正值得掌握,但它在工具箱中的位置是"最后防线"——防线之前的每一段工事,都比防线本身牢固。测量方法学的教学若只教统计诊断而不教设计预防,等于只教了问题的一半。

参见

参考资料