以能力评价为基础的医学教育系统的构建

杨若愚¹，蔡明¹ 

（1上海健康医学院康复学院，上海，201318）

[摘  要]基于能力评价的医学教育体系改变了包括教师、课程设计者、开发人员、临床教育工作者和项目管理者在内的人们的观念。这种越来越流行的方法强调以下事实：不同的个体持续时间不同，基础、目标和时间变异性对必要的评估数据决定学习者的进步。这些决定可能是形成性的或终结性的。本文提出了收集评估数据和做出评估决定的医学教育系统的构建。这些实践尝试包括管理评估数据，界定并作出有效评估决策、评估创新，以及建模等过程，在现实环境中，这是评估丰富的相互关联的社会系统。有迹象表明研究人员和从业者，从传统医学教育到能力为基础的医学教育系统，会不断的创造、提供创意和评估创新。

[关键词]医学教育；能力评价；管理系统

[基金项目]2018年度上海市高校青年教师培养资助计划“课程思政改革要求下《运动生理学》教学设计创新研究”（ZZJKYX18005）

[作者简介]杨若愚（1980.11-），男，汉族，江苏扬州人，助理研究员，博士研究生，从事康复治疗学的教学和研究工作；蔡明(1986-) ，男，山东日照人，博士，上海健康医学院康复学院讲师，研究方向：认知-行为障碍康复。

前言

基于能力的医学教育（Competency-based medical education，CMBE）在教师、学习者和管理机构的共同努力下取得了相当大的成就。它改变了人们对传统医学教育的认知以及实践设计师、开发人员、临床医生、教育工作者和项目管理者在整个医学教育体系中的作用和定位。从对教学评估影响来看，基于能力的医学教育具有特别重要的意义。

   相较于传统的医学教学体系，评价对于基于能力的医学教育系统来说更为重要。传统医学教育体系是建立在教学、训练会获得能力的假设之上，因此评价主要是一种“安全验证”。然而这种假设随着教学实践的开展，被证明可能存在缺失，因为当学习者的能力在特定时间或阶段内无法形成或获得时，是无法进行评价的，没有评价也就无法找到学习者的缺失并进行相应的反馈和补救。在基于能力的医学教育体系中是没有这样的假设的，学习者的学习过程是具有个性化特点的，学习评价也必须符合学习者所能承担的最大学习负荷。

1 基于能力的医学教育的评价原则

基于能力的医学教育将时间作为一个重要的变量参数，它将决定学习者何时能进入下一阶段的学习教育。而这样的决定是基于对学习者能力的评估和判断之上的。对于这种能力的定义和描述如下：

在多个医学领域的特定环境下的表现；

能力是否合格需要在能力、内容、训练阶段等多个相关方面进行评估；

能力是多维的动态，它会随着时间、经验和背景的变化而改变

   基于能力的医学教育最重要的原则是需要首先建立一个能力培养目标，而这样的能力目标是系统做出判断和收集数据的关键要素。

第二个重要原则是区别评估数据和由这些数据得出的评估判断结果。如在多项选择题中，知识、评估数据（分数）通常与评估、判断和决定（通过/失败，补救、表扬）不同，相反，评估判断基于临床领域的评估数据可以变得不那么明显。普通的观察者在评价能力表现时通常是评估数据的来源，而教学系统的真正评价人员则应该利用这些评价数据来判断学习者的能力，评价学习者是否取得了进步。利用的测量工具和方法只是为这些判断提供数据，只是达到目的的一种手段，而不是目的本身。

第三个重要原则是结果就是评判。在普通的教育考试设置中，考试结果的决定适用于学生是否进阶或取得文凭。在临床教育中，决定结果可以从反馈或临床实践的评估中获得，这样的评估决定可以是终结性的（如毕业），也可以是形成性的（如学习者可能提供的绩效反馈用于指导自己的学习）。

2 收集评估数据

2.1 评估任务

由于能力是无法直接进行评估的，所以必须定义一些相关的任务和活动来产生可以观察到的并能以某种形式进行测量的行为。任务、活动可以是简单的形式，如回答一个问题，也可以是非常复杂的形式，如讨论具体的病例。这些任务的选择对评估判断的有效性有着深远的影响，良好的评估判断需要利用多种评价方法的多个数据来源，具有一定的适用范围。设计缜密且人性化的评估程序流程能够提高评估判断的质量。

尽管专家的意见并不总是一致，但是关于临床实习生的有效的评估决定被认为是有价值和有必要的。这样的观点要求临床医生和临床实习生在工作环境中的互动作为评价数据进行收集，这是一个十分新颖的研究领域。

2.2 评估创新

基于能力的医学教育项目需要利用专业的评估知识在评价方法和大数据利用集成的过程中来引导创新和实践。这样的专业知识和能力在评估、数据分析、信息管理和决策支持等方面，对于培养和招募专业人才来说是十分有必要的，那样的话能有助于完全实现基于能力的医学教育项目的期望和目标。如果致力于发展和使用各种创新的评估方法，那么基于能力的医学教育系统就应该充分利用当前可能被忽视的评估数据。这些数据包括学习者的基本数据（如电子健康记录）、基于团队的能力表现、管理数据（如资格测试成绩）等，都可以被充分利用起来，作为整体评估判断所需的一部分数据。

病患治疗的结果也是一种关键的评估数据的重要来源，将其整合入整个评价体系能够增加评估结果的有效性。然而将患者治疗结果与医学教育联系起来是一个非常复杂的过程。收集这样的数据，必须充分理解学习者对治疗结果的具体贡献，并确定这些数据应该如何反馈给评估决策人员。目前这部分内容仍然是基于能力的医学教育系统需要研究的课题。

2.3 评估数据的管理

基于能力的医学教育评估需要来自多个数据源的数据，而要获取这样的数据，相较于传统的评估系统来说，需要有更好的数据共享、管理和沟通的水平。要实现学员的跨平台的评估数据的分享和交流是具有很大的挑战和难度的。能力表现和评价数据的电子档案可能会成为一个较好的解决方案，但是不同机构的档案具有很大的变化，缺乏标准化和一致性，为数据共享和管理也带来了一定的难度。还有诸如学习分析可能有助于数据的管理和分析，移动技术也可以帮助临床数据的收集，这些都是可能用于数据收集、管理的方法和技术。

3 做出评估判断

3.1终结性和形成性评价

评估判断存在一定的范围，这种范围是由学习者和教育系统来决定的。终结性评价是包括通过课程或不通过课程的决定、准许毕业或不准毕业的决定和能力水平的评判等。形成性评价包括指导学习者自我调整学习的反馈、线上模块的自我测试和阶段进度测验等。

在基于能力的医学教育体系中，形成性评价和终结性评价被认为具有不同的目的。初级学习者在学习训练的过程中，通过形成性评价来指导如何弥补不足和差距。中高级学习者可采用相同的方法进行评估，来提供终结性的评价，决定是进阶还是继续学习。然而，终结性的评价和决策一般需要更高质量、更高水平的评估数据来形成最后的决定。

3.2 评价标准和规则

终结性评价不仅需要稳定的评估数据，而且需要评价能力表现的标准和规则，这些标准和规则是可以被定量、获取或被描述的。

基于能力的医学教育体系一般比较不容易接受标准的传统心理测量学，以至于需要花费更多的努力和尝试去对某些方面的主观评估判断进行系统化和标准化。这些努力尝试包括基于行为表现的评分量表、能力表现的详细描述和说明以及教师培养发展的统一标准。

3.3 独立的监督与评估

基于能力评估的医学教育体系中有一个非常重要的位置，是进行专业实践的监督及评估的岗位，其重要特性之一就是根据学生日常的学习表现，对其完成任务的状况进行评价。这个位置是独立与整个医学教育体系的，只根据从学员学习过程中获得的多个维度的数据，根据评价标准和规则，结合实际情况进行相关的学习评价和能力表现的评估。

3.4学习阶段的过渡和个性化学习计划制定与调整

对于教师和研究人员来说，如何确定学习者在一个医学教育体系中，从一个学习阶段过渡到另一个学习阶段的时间点是需要做大量的准备工作的，如确定医学生何时过渡到临床实习阶段。基于能力的医学教育通过评估可以帮助教师获得学习者在学习过程中获取的技能、能力表现以及弱点和不足，以便补救和调整个人的学习计划，使其更加满足个性化的需求，而不是个人需求服从于群体需求。

4 总结

学习成果的评估对于各种层次的医学教育来说都是必需的，但是基于能力的医学教育体系的评估在质量、频率、目的和管理上有别于传统医学教育系统，具有特殊的要求。随着基于能力评估的医学教育系统的培育和发展，大量的人力、物力被投入到评估方法和系统开发的过程中，使其能够不断的发展。在今后的医学教育发展中，评估领域将成为一个充满活力的创新领域，对整个医学教育提供强大的助力。

[参考文献]

1张英杰,钱力贤,林沅锜.我国医学本科教育评估存在问题及对策研究[J].继续医学教育,2019,33(04):47-49.

2田薇. 美国高等教育第三方评估研究[D].河南师范大学,2018.

3潘晶. 美国高等教育质量认证与评估标准研究[D].沈阳师范大学,2017.

4孙宏斌,张凤杰.国外高等教育质量评估机制对我国的启示[J].黑龙江省政法管理干部学院学报,2015(03):148-150.

5王素君,李晓薇.浅议我国高等教育质量评估制度[J].沈阳干部学刊,2015,17(04):56-57.

6 Mink RB, Schwartz A, Herman BE, et al. Validity of level of supervision scales for assessing pediatric fellows on the common pediatric subspecialty entrustable professional activities[J]. Acad Med, 2018, 93:283–291.

Construction of medical education system based on competency assessment

Yang Ruoyu 1, Cai Ming 1

 (1 Rehabilitation College, Shanghai Medical College, Shanghai ,201318)

Absrtact: the medical education system based on ability evaluation has changed the concept of people, including teachers, curriculum designers, developers, clinical educators and project managers. this increasingly popular approach emphasizes the fact that different individual durations differ and that the basis, goal, and time variability determine learner progress for the necessary assessment data. These decisions may be formative or summative. This paper presents the construction of a medical education system that collects evaluation data and makes evaluation decisions. These practices include managing assessment data, defining and making effective assessment decisions, evaluating innovations, and modelling processes  In the real world, this is an assessment of rich interconnected social systems. There are signs that researchers and practitioners, from traditional medical education to a competency-based medical education system, continue to create, deliver and evaluate innovation.

 Keywords: medical education; competency assessment; management system