
一批心理测评收齐后,后台出现几份用时很短、连续选择同一选项的答卷。项目负责人需要判断这些结果还能不能用,但仅凭这两种现象,不能把学生定为敷衍作答,也不能直接宣布问卷无效。更稳妥的做法是先保留原始记录,核对日志和施测条件,再依据对应工具的规则,由负责人员作出有理由、可追查的处理决定。
本文讨论机构怎样复核作答质量,不提供跨量表通用的快答秒数、标准差阈值或自动判废代码。以下记录方法是工作建议,不能代替具体量表的技术手册与专业判断。
先分清系统记录了什么和人判断了什么
“提交用时较短”是一条观察,“触发快答规则”是系统按照某个条件给出的标记,“本次结果能否解释”则需要进一步判断。这几层混在一起,容易把待核查记录直接当成无效结果。
建议把处理过程分成日志事实、规则触发、人工复核、统计处理四层。日志保存开始与提交等实际事件;规则层写清触发条件及版本;复核层补充实施情境和工具依据;统计层才记录是否纳入某项分析。即使最后决定暂不纳入,也应留下理由,避免后来的人只看到一个红色标签。
国际测验委员会的测验使用指南要求使用者在适当情况下准确记录反应时间、记录施测偏离,并依照工具说明计分与解释。这支持的是审慎核查,不是把某个统一秒数视为所有问卷的有效性界线。

短时间和重复选项各自还缺什么证据
看到时长异常,先问计时从哪里开始、到哪里结束。页面加载、切到其他页面、断网后重新提交,是否被计入总时长?日志能否区分重复请求与真实作答?这些问题没有查清,拿一个看似精确的数字判断作答态度,结论可能建立在错误记录上。
再核对题目长度、呈现方式、辅助阅读等施测条件。不同工具和不同实施方式的记录不能直接套同一阈值。若准备使用快答规则,负责人需要找到该工具的技术依据,明确它适用于什么对象和情境,以及如何处理被误标记的答卷。
连续选择同一选项也只描述答案模式。对题目内容相近的问卷,真实回答可能相似;把选项编码后计算全卷标准差,只能说明这些数字的离散程度,不能凭一个小数值证明被试没有认真作答。反向计分、题目结构与缺失值处理,还会改变指标的含义。
如果工具本身提供经过验证的作答质量指标,应按照它的说明使用。不要自行添加所谓“反向测谎题”,也不要把自行编写的两个近义或反义句子塞进标准量表,随后沿用原量表的计分与解释依据。
让一条待复核记录能被别人接着处理
下面是一份可供机构调整的工作记录。字段用于保留判断依据,并不表示任何软件已经具备同名功能。涉及个体资料时只保留本次工作必需的信息,并限定查看人员。
原始记录编号:____;工具与版本:____;本次施测方式:____;触发规则及版本:____;日志显示的具体事实:____。
待核对的施测条件:____;核对方式及所得信息:____;依据的工具说明或项目规则:____;复核人及日期:____。
处理决定:____;决定的理由与仍存限制:____;用于哪项分析及是否纳入:____;下一步动作、负责人和完成时间:____。原始报告与补充记录存放位置:____。
例如,一份答卷被系统标为用时异常,但工作人员核查发现同一设备存在重新连接的情况。此时应先确认计时记录是否可信,保留“待复核”状态,而不是直接要求学生重测。假如核查仍不能支持结果解释,负责人员再按工具要求决定后续安排,并写明证据不足在哪里。这是虚构的工作示例,不是客户案例,也不表示网络中断必然解释所有短时长记录。
开发规则前就约定误报怎样处理
系统可以帮助保存事件、提示异常、汇集复核材料。要把一个标记升级为自动处理规则,还需要回答:依据来自哪里,在哪些工具和对象上验证过,用什么标准判定正确,以及误报、漏报会造成什么后果。没有这些材料,不能宣传一个算法能“精准拦截90%以上无效答卷”。
项目可以先把候选规则用于提示,记录它与人工复核结论的差异,再由适当的专业与技术人员评估是否修改。验证记录应注明样本来源、工具版本、施测方式、判定标准和适用限制,不能把某次试验结果外推为所有场景的保证。
同时写清权限分工:谁能查看个体记录,谁负责解释,谁能改变统计纳入状态。处理前后的状态与理由应可追查。国际测验委员会的质量控制指南强调计分、分析和报告全过程的控制;软件能生成报告,并不意味着所有解释已经得到验证。
是否重测取决于复核结论
需要重测时,由专业负责人依据具体工具与施测条件确定安排,说明本次为什么无法采用、重测需要改善什么条件,以及后续采用哪次记录。不要为了让完成率更好看而反复催测,也不要悄悄删掉原结果,让前后的处理原因无法追查。
作答质量复核与现实中的支持需求还要分别处理。如果学生主动求助,或工作人员已观察到明显困扰,不应等待一份“合格问卷”才回应。当前这份结果能不能用于某项统计,与这个人是否需要被认真倾听,是两个需要分别作出的决定。
参考资料
[1] International Test Commission:The ITC Guidelines on Test Use
https://www.intestcom.org/page/15
[2] International Test Commission:Guidelines on Quality Control in Scoring, Test Analysis and Reporting of Test Scores
https://www.intestcom.org/page/17
