心理评估量表换一群人还准吗?咨询初访要核对哪些验证证据

研究样本与真实来访者的症状范围、共存问题和招募条件不同,量表表现可能随之变化。本文说明样本谱效应,并提供咨询机构采用工具时的核对表。

心理评估量表在研究中表现不错,不代表搬进咨询初访就同样好用。关键要看研究里的人,与实际来访者是否相似。症状轻重、共存困难和招募方式改变后,分数的解释及筛查表现都可能变化。机构选工具,要核对的是“这份证据能支持我们怎样使用”,而不只是论文里有没有“信效度良好”。

论文里的受试者,可能比咨询室里的人更容易区分

设想一家机构准备引入情绪问卷。供应商拿出的研究,一组是已明确诊断、症状明显的患者,另一组是几乎没有相关困扰的志愿者。两组分数拉得很开,看上去很好区分。

实际初访却没有这么整齐。有的人睡不好、工作吃力,却说不清主要困扰;有人同时经历关系冲突、身体不适与情绪低落;也有人已经接受支持,状态正在变化。这些处在中间、彼此重叠的情况,可能恰好没有被原研究充分纳入。

研究对象的症状范围与组合会影响测评表现,这类变化称为样本谱效应(spectrum effect)。它不等于研究一定做错,也不意味着工具不能用;问题在于,不能把一个样本里的结果原封不动地当成另一个场景的表现。诊断试验研究曾发现,把明确患者与另行招募的对照组比较,可能高估实际应用中的区分能力。相关研究

只换算“阳性比例”,还没有解决人群差异

这里有两件事需要分开。第一,目标问题在使用人群中有多常见。即使假设敏感度、特异度不变,筛查阳性者中真正符合参考标准的比例,也会随这个基础比例改变。

第二,来访者的特征变了,敏感度和特异度本身也可能变化。例如,轻微、混合或不典型的表现增多,工具要完成的区分任务就可能更难。只根据新的基础比例换算预测值,不能补上这部分证据。样本谱研究因此强调,要观察不同人群中的实际表现,而非只带走一个总体数字。样本谱效应的分析研究

对咨询机构而言,实用的问题是:哪些人容易被高估困扰,哪些人容易被漏掉,误差会不会影响接下来的访谈与支持安排?一个“总准确率”回答不了这些问题。

引入量表前,把研究条件和使用条件并排核对

核对项目 研究中查什么 实际使用中问什么
从哪里招募 学校、社区、门诊,还是网络志愿者 我们的来访者主动求助,还是接受统一筛查?
纳入了哪些情况 症状范围、共存问题、既往支持及排除条件 日常接待的人,有没有大量落在研究范围之外?
以什么作对照 专业访谈、其他问卷,还是日常功能指标 这份证据支持了解症状、筛查线索,还是观察变化?
怎样填写和计分 语言版本、回顾时段、填写方式及计分规则 机构实际使用的,是否确实是同一版本和同一用途?

尤其要注意第三项。与另一份问卷相关较高,不能直接变成诊断准确率;能区分两组人,也不自动证明适合追踪某个人的变化。COSMIN的内容效度方法要求把测量内容、目标人群和使用场景一并考虑。证据针对具体解释与用途,不是给量表颁发一张到处通用的合格证。COSMIN方法手册

证据不够时,先缩小结论,再补目标场景验证

机构可以先把拟采用工具的用途写成一句具体的话,例如“辅助成人初访了解近期情绪困扰”,而不是“全面判断心理健康”。再列出它尚不能回答什么,需要由哪些访谈资料补充。

如果要进一步验证,不能只让熟悉量表的同事试填,也不能只检查页面能否出报告。应由具备测量研究能力的人员设计,纳入与日常来访者相近、范围足够的样本,使用独立资料核对预先确定的指标,并交代不同人群的误差与不确定性。小规模试运行可以发现题意、流程与计分问题,却不能替代正式验证。

最后留下的应是一份清楚的采用记录:用哪个版本、服务哪些人、支持什么解释、哪些情况需要补充评估。这样,下次有人问“为什么初访要做这份量表”,团队拿得出的就不只是一篇论文,而是一套与实际工作对应得上的依据。

Leave a Reply

Your email address will not be published. Required fields are marked *