一套心理测评工具是否专业,应该看哪些证据?

判断心理测评工具是否专业,要核对适用对象、版本、计分解释及信效度证据。本文说明信度与效度各自回答的问题,并提供机构采购时可以逐项核验的材料清单。

机构采购心理测评工具时,常会看到“专业研发”“科学评估”等介绍。判断这些话有没有依据,要把问题问得更具体:这套工具测什么、用于谁、结果准备怎么用,分别有什么证据?报告精美、题目很多,都不能替代这些回答。

信度和效度,分别回答什么问题?

信度关注测量结果的一致性和精确程度。例如,用于了解相对稳定特点的工具,在条件相近的重复测量中,结果应有相应的稳定性;用于了解近期状态的工具,则要考虑真实变化。不能看到两次分数不同,就直接判断工具不可靠。

效度关注的是:现有证据能否支持我们这样解释和使用分数。一个工具适合了解工作压力,不代表它也能判断员工是否适合晋升。采购时,应让提供方把“支持什么用途”讲清楚,而不是只出示一个看起来很高的系数。

心理测评信度与效度分别关注的证据

专业材料要与实际使用版本对得上

一份研究用了某个量表,不代表同名的所有版本都获得了相同支持。机构需要核对题目版本、语言、计分方式和适用人群。比如,成人样本得到的结果,不能直接作为儿童使用的依据;删减题目之后,也要核实简版是否有相应研究。

如果报告给出了高低等级,还要看这些等级怎么划分。采用常模比较的,应该说明参考群体及其来源;采用界值的,要说明依据和适用目的。一个“偏高”,只有放回对应的比较规则里才有明确意义。

把证据核验放进采购清单

可以向提供方索取四类材料:工具来源与使用权限、适用对象与用途说明、信效度研究或技术手册、计分与报告解释样例。材料不必堆得很厚,但名称、版本和用途要能相互对应。只给营销截图、无法说明研究对象的,不宜直接作为选用依据。

橙星云团体测评的量表列表提供名称、描述和题目数量,便于机构先确认候选工具;确定采用前,再逐项核对该版本的研究与解释材料。这样既能安排系统中的测评项目,也能把工具的专业依据核实清楚。

最后再用样例报告检查一次:从作答到分数、从分数到解释,能否说清依据?一套值得采用的工具,应当让专业人员看得懂它如何得出结论,也知道它适合解决什么问题。

参考资料:AERA、APA与NCME《教育与心理测验标准》(2014),效度与信度章节。

Leave a Reply

Your email address will not be published. Required fields are marked *