系统误差
| 系统误差 | |
|---|---|
| 英文名 | Systematic Error / Bias |
| 学科归属 | 心理测量、研究方法 |
| 核心含义 | 方向恒定、可重复出现的测量偏差 |
| 特征 | 不随重复测量平均而消失,信度系数无法察觉 |
| 主要来源 | 方法偏差、反应风格、工具偏差、情境偏差 |
| 相关条目 | 随机误差、测量误差、构想效度|} |
系统误差指方向恒定、以同样方式重复出现的测量偏差:量表总是把某类被试的真实水平高估三分,或某组被试因作答习惯总是偏低——偏差不随重复而抵消,而是稳定地存在于每一次测量中。
系统误差与随机误差构成测量误差的两大成分,两者的对比可以概括为:随机误差使分数波动(不可预测的偏离),系统误差使分数整体位移(可预测的偏离)。波动损害信度,位移损害效度——信度系数对位移完全无感,这正是系统误差危险的原因。
与随机误差的对照
把两类误差放在同一框架下对比,其性质差异一目了然。
方向:随机误差正负交替、期望为零;系统误差方向恒定、期望不为零。
可平均性:多次测量取平均可以压低随机误差(平均值的随机误差随次数减少);系统误差在平均后原样保留——重复一万次也消不掉。
检测途径:随机误差由信度系数(重测、分半、内部一致性)捕捉;系统误差只能通过效度证据捕捉——与效标的关系是否合理、跨方法是否收敛、跨群体是否等值。
应对策略:随机误差靠标准化程序与多题平均压缩;系统误差靠测量设计(多方法、措辞平衡)与分析校正(方法效应建模)处理,有些成分(如深层的文化偏差)甚至无法在统计上校正,只能靠概念层面的工具修订。
这一对照的实际意义是:研究者面对"测量不准"的诊断,第一步就是判断误差属于哪一类——处方完全不同。
心理学测量中的系统误差
心理学测量的系统误差有几种典型的、被充分研究的形态。
共同方法偏差:自变量与因变量都用同一来源(同一人的自评)测量时,两者相关中混入方法效应。诊断手段包括程序性设计(多来源、多时点)与统计检验(Harman 单因素检验的粗略诊断、标记变量法、多特质多方法模型)。程序性预防优于统计补救——统计方法能校正的部分有限。
社会赞许性:敏感题目(攻击、偏见、物质使用)上的系统性美化。应对包括保证匿名、间接测量技术(内隐联想测验)、随机应答技术、行为指标替代。
作答风格:一贯答"是"的默认倾向、极端作答倾向、 midpoint 倾向。这些风格与构念无关却污染分数,处理手段包括正负向措辞平衡、指令强调、风格分数的统计控制与量化建模。
文化与方法等值问题:量表跨文化翻译后,题目在两种文化中的含义与难度不同,使跨文化均值比较失真。测量等值检验是标准诊断;不等值时需要题目修订而非统计校正。
这些形态的共同点:都产生于测量工具或测量情境与被测构念的系统性错位。正因如此,其解决方案也在设计与工具层面,而不在计算层面。
系统误差与研究结论
系统误差对研究结论的威胁模式与随机误差不同:它不稀释效应,而常常制造效应或掩盖效应。
制造虚假效应:两组测量的方法条件不同(一组施测于安静实验室、一组施测于噪杂教室),组间差异可能全部来自情境系统误差。共同方法偏差则是虚假相关的稳定来源——两个"用同一种方式问出来的"变量相关偏高。
掩盖真实效应:社会赞许性把真实的行为差异压平——所有人都声称同样健康的行为,组间真实差异被抹去。
扭曲方向:工具在某群体的文化含义相反时,跨群体差异可能方向颠倒。
污染纵向结论:不同时点的施测情境差异被误读为发展变化。
识别这些威胁的通用原则是:把"测量的方法条件"当作与"被试特征"同级的变量来对待——谁、何时、何地、用什么版本、以何种指令测量,每一项都可能引入系统位移,都应在设计与报告中写明。方法条件的差异本身,就是需要控制或建模的研究对象。
诊断与校正
系统误差的诊断与校正已形成一套工具组合。
诊断工具:跨方法收敛检验(同一构念用两种方法测量的相关应显著高于跨构念同方法相关);多特质多方法模型的方差分解;标记变量法(用理论上与任何构念无关的方法标记变量估计方法方差);跨群体测量等值检验;与外部效标的关系检验(系统误差使效标相关异常)。
校正手段:方法效应的统计建模(潜变量方法因子);成对差分设计(同一被试两种条件下测量,差分消去个体稳定成分);工具修订(删除跨群体不等值的题目);设计层面的来源分离(数据收集前就把方法方差降到最低)。
需要坦率的边界是:统计校正只能处理被建模的系统误差,而系统误差最危险的形态恰恰是未被发现的那部分。因此任何校正手段都无法替代测量设计的审慎——方法来源的分离、题目的文化预试、施测条件的标准化。方法学界的一句老话在这里适用:最好的统计补救,是那些不需要补救的设计。
与研究设计的连接
系统误差的诊断与设计之间的关系,可以进一步细化为一条设计清单。
来源分离:自变量与因变量的测量来源尽量不同(自评配他评、问卷配行为指标),共同方法偏差在设计阶段就被切断。
时点分离:预测变量与结果变量分时点测量,既保护因果顺序的解释,也稀释情境性系统误差的同步污染。
情境标准化与记录:施测条件标准化之外,把无法标准化的条件(不同校区、不同年份)记录为变量,纳入分析检验其效应。
敏感题目的专门设计:匿名保证、间接措辞、行为替代指标,压缩社会赞许性系统偏差的来源。
跨群体工具预试:任何跨群体比较之前,先做题目层面的文化预试与等值检验。
这一清单的公共逻辑是:系统误差的来源在设计与工具之中,因此对策也在设计与工具之中。统计校正值得掌握,但它在工具箱中的位置是"最后防线"——防线之前的每一段工事,都比防线本身牢固。测量方法学的教学若只教统计诊断而不教设计预防,等于只教了问题的一半。