
选择认知能力测试与训练仪,要分别核对它测得准不准,以及训练能否改善你关心的具体表现。测评部分有依据,不自动说明配套训练有效;训练关卡的分数上涨,也不能单独证明学习、工作或日常记忆变好了。
准备了解自己的能力,和准备购买一套训练设备,是两个相连却不同的决定。有人想知道为什么做事容易漏步骤,有人想练习记忆,还有人看到“天赋开发”的宣传,期待找到更适合自己的学习方向。用途说得越具体,越容易判断产品资料有没有回答你的问题。
先让产品名称落到实际任务上
“天赋能力测试”“全脑训练”“认知能力测试与训练仪”这些名称,本身不能说明测量了什么。可以请提供方演示一个完整任务:参与者是记住数字、判断图形规律、辨认目标,还是回答对自己的看法?记录的是正确率、反应时间,还是自评选项?
任务测到的当前表现,不能直接拆出多少来自先天、多少来自学习经历。一次结果也不足以决定适合什么专业或职业。若你的主要问题是理解天赋报告,可以先看天赋测试中的兴趣、能力、价值观与人格怎样分开;选训练设备时,还需要继续核对下面两组证据。
测评报告和训练效果,要分别要资料
| 需要判断什么 | 向提供方要什么 | 拿到资料后怎么核对 |
|---|---|---|
| 测评是否适合自己 | 测验名称、版本、任务说明、适用对象及技术资料 | 研究中的年龄、语言和使用场景,是否覆盖实际使用者 |
| 报告分数怎样解释 | 计分说明、参照人群、信度与效度依据,以及一份虚构或充分脱敏的样例报告 | “低于平均”是和谁比较,结论是否超出了任务实际测量的内容 |
| 训练改善了什么 | 对应训练方案的研究,注明产品或程序版本、参与者、对照条件、评估任务和随访 | 改善的是练过的题、没有练过的任务,还是实际学习与生活表现 |
国际测验委员会的测验使用指南要求使用者根据具体用途检查技术证据和适当的参照群体。设备屏幕大、练习项目多、报告图形漂亮,都不能替代这些资料。资料暂时缺少时,应把相应结论记为“尚未核实”,而不是靠演示印象补上。
还要确认研究对象确实是准备使用的版本。如果论文研究的是另一套任务、另一种训练安排,或者只引用了某种认知理论,就需要提供方说明它与当前产品有什么直接关系。理论有依据,与这台设备的效果已被验证,之间还有距离。
关卡越做越熟,怎样判断有没有练到目标
例如,一个人反复练习屏幕上的图形排序,完成速度越来越快。这可以说明他在这项练习上的表现进步了。若希望减少工作中漏记事项,就还需要观察没有反复练过的任务,以及真实工作中的变化,不能直接把关卡成绩换算成“记忆力提升百分比”。
2010年的一项线上脑力训练研究发现,参与者在练习任务上有进步,但没有发现这种进步迁移到未训练任务的证据。这个结果针对该研究的人群、任务和训练安排,不能代替对所有训练产品的判断。
2016年的研究综述也把练习任务、相近任务和日常表现分开审查。对购买者有用的启发是:宣传说改善哪件事,就应拿出支持那件事的研究。仅展示使用前后两张分数图,仍无法排除熟悉题目、测验重复或其他同时发生的变化。
试用前可以写下一句具体目标,例如“希望更有条理地完成有多个步骤的日常任务”,并与提供方约定怎样观察变化。也要看使用是否方便、提示是否易懂、训练负担能否接受。试用能帮助判断是否愿意持续使用,但一个人的短期体验不能替代效果研究。
如果用途涉及认知障碍评估或康复,应由具备相应资质的专业人员确认适用方案,不能把面向健康人群的练习证据直接用于医疗目的。购买前,把测验资料、训练研究、样例报告和实际试用记录放在一起,再决定这套工具是否值得投入时间与费用。
