基础知识 · 2024年2月28日

测试发布的质量控制

测试发布质量控制

心理测量学

测试发布质量控制

测试发布是准备基于计算机的评估以在电子平台上交付的过程。测试发布就像一辆从装配线上下来的汽车。这是在开发评估方面付出大量努力的结晶。正如汽车在出厂前要经过广泛的检查一样,基于计算机的评估需要细致的质量控制程序,以确保其按预期运行。错误可能会对赞助组织产生重大后果,包括声誉损失,甚至可能产生法律影响,具体取决于错误的类型。

测试发布质量保证

测试发布质量控制过程在发布过程开始之前就开始了。该过程的关键步骤如下:

步骤 1:确定测试发布规范

质量控制从完成测试规范文档开始。测试规范文档提供了应如何发布测试的模式或教材。它通常包括以下信息:

  • 测试设计
    • 管理模型(即线性固定形式、LOFT、CAT)
    • 评分策略(二分法/多分法项目级评分、补偿性/结合性域/分段评分)
    • 测试长度(向每个考生显示的项目数)
    • 测试时间(测试/部分允许的时间)
  • 内容规范
    • 包含的项目列表(以及评分/未评分的项目)
    • 将项目映射到域/部分/子量表(如果适用)
    • 刺激与项目的映射(如果适用)
    • 项目键
  • 辅助交付组件
    • 保密协议
    • 教程
    • 自定义帮助屏幕
    • 计算器
  • 特性和功能
    • 导航(例如,允许查看以前的项目)
    • 查看屏幕
    • 电子草稿纸
    • 项目级评论/反馈

请注意,这不是一个完整的列表,测试规范文档所需的信息可能会因评估类型和用于交付的特定测试平台而异。测试规范上的一些数据是相对静态的,只会随着测试设计的变化而变化。其他数据(如包含的项目列表)是动态的,通常在每次重新发布评估时都会更改。

测试规范文档成为测试发布者用于如何发布评估的权威事实来源。它是赞助组织与其测试发布供应商或合作伙伴之间的关键沟通工具。

步骤 2:确定测试发布错误的来源

全面确定测试发布过程中可能出现的所有问题,应作为测试上线前需要执行的质量控制检查的指南。鱼骨图是一种可以帮助开发潜在错误综合列表的工具,也称为石川图或因果图。它是一种可视化表示,用于识别和组织特定问题或影响的可能原因。该图采用鱼骨架的形式(因此得名),其中“头部”代表问题或影响,“骨头”代表不同类别的潜在原因。沿着每块骨头,较小的分支代表子原因,这些子原因可能导致问题。

鱼骨图是通过让一个团队代表流程中涉及的所有学科来创建的,他们集思广益潜在问题,或者在测试发布的情况下,可以引入测试发布流程中的潜在错误。首先确定潜在的错误类别,然后集思广益更具体的错误,可以全面分析测试发布过程以及该过程中可能引入错误的潜在情况。

下面是测试发布错误的示例鱼骨图:

测试发布错误 Fishbone

第 3 步:根据事实来源进行审查

应根据每个潜在错误的事实来源对检查进行审查。测试规范将是关键的事实来源,与已发布的考试进行比较以识别任何错误。项目库是项目表示和项目元数据的真实来源。

无差错的测试发布对于维护测试赞助商的声誉至关重要。即使是很小的错误,例如拼写错误的单词,也可能具有破坏性。更重要的是,公布考试中的错误可能会对考生产生有害影响。评分错误可能意味着考生不及格和通过考试之间的差异,在认证或执照考试的情况下,这可能会对考生的职业和生计产生可怕的后果。

正如数学家纳西姆·尼古拉斯·塔勒布(Nassem Nicholas Taleb)所说,“质量是智慧努力的结果,而不是偶然发生的。严格的质量控制程序有助于使发布过程成为一项明智的工作。

贝琳达·布鲁纳

贝琳达·布鲁纳(Belinda Brunner)在评估方面拥有二十多年的经验,包括三个医疗保健认证委员会和两家国际测试公司。她的专长在于高质量测试的开发和管理,尤其是人员认证。