陈 超 陈丽芬 朱庆双 陈 晨 王亚军
(首都医科大学宣武医院教育处,北京 100053)
随着医学教育改革在世界范围内的不断发展与推进,临床实践教学规范化、标准化、科学化的必要性日益凸显。临床实践技能考核是检验培训过程和教学效果的重要依据,考官正是影响考核科学、规范、公平、公正的主要因素[1-2]。考官的培训越到位,考试过程中出现问题的概率越低,工作效率越高,因此规范有效的考官培训就显得尤为重要[3-4]。考官培训多分为日常通识技能培训和考前针对性培训两种形式。通过整合云平台资源,利用信息技术与教育深度融合,迎合了时代的需要,使教育突破时间和空间的限制,从封闭走向开放[5]。为探索应用云平台的考官培训模式提升培训效果和效率的可行性,我们对首都医科大学临床技能会考中应用云平台进行考官考前培训及其培训效果进行了调查、分析和评价。
1.1 调查对象
2021年3月参加首都医科大学临床技能会考的考官190名。遴选标准为:中级以上职称,2年以上临床教学经验,通过校级考官资格认证培训。
1.2 培训方法
考官培训分为日常通识技能培训和考前针对性培训两种形式。日常通识技能培训包括职业素养、考试的基本理论、命题的方法、考试设计方法、考试实施路径、评价量表的应用方法、考试结果的分析评价方法7个方面。考前针对性培训主要针对考试纪律、考核流程、考核物品的使用方法、评价量表的应用标准、试评分等5个方面。
此次培训为考前针对性培训,师资为考核实施负责人、首都医科大学遴选的专家型考官以及临床技能中心工作人员;培训时间共计2 h。培训手段与方法如下。
(1)建立云教室:利用云平台通过手机号码邀请考官进入具备在线通知、视频直播、在线完成作业、线上线下实时互动、填写问卷、打卡签到等功能的云教室形成云班级,并根据不同的专业进行分组,每组配备专职管理员,负责组织培训期间的所有教学活动。
(2)云平台在线统一培训:由考核各环节负责人采用在线互动直播的形式对相关内容进行讲授及问题解答。
(3)云评分模拟考核现场场景:采用考核现场使用的信息化考评系统的云平台版本,在线模拟考核现场场景。在培训前根据各考核项目中易错点和易误判点设定脚本,录制模拟技能操作考核视频,并制定相应的标准评分表(标准分为85分)。授课教师(专家型考官)对有关要点进行指导并讲解评分标准。有疑问的考官可以直接提问,现场交流和解答问题,让考官可以充分了解评分标准,达到同质化的要求。然后在云平台模拟考核场景并播放视频,由考官进行评价,结果实时反馈并了解培训效果,并对评价差异较大(误差大于5分)的考官进行二次培训。
1.3 评价方法
1.3.1 培训效果分析
培训前结合评分量表,参考既往难点,选择各专业具有代表性的操作项目,按照85分的标准分数进行操作视频脚本设计与拍摄, 使用云平台进行评分。分析经过培训后不同专业(内科、外科、妇产科、儿科、急诊科、护理等)考官应用云平台模拟评分结果与标准分数的差异,评价培训效果,验证培训有效性。
1.3.2 问卷调查
采用自设问卷,利用问卷星平台对研究对象实施自填式问卷调查,调查内容包括调查对象的基本情况、培训需求匹配度、培训形式匹配度、培训内容合理性、培训效果认可度、培训效果自评、软件应用熟练度、继续参加考核意愿、培训流程满意度等。采用Likert 11级评分法[6]对每个指标11个等级由低到高分别赋值0～11分,按照由低级指标得出高级指标的运算方向,依次计算各指标的算术平均分。共发放问卷190份,回收有效问卷190分,有效回收率为100%。
1.4 统计学方法
计量资料采用均数±标准差(±s)表示,计数资料采用频数(百分比)表示。利用可靠性分析、KMO和Bartlett球形检验的方法对考官培训效果的认同程度进行评价,采用主成分分析的方法对问卷测量指标的信息进行降维处理,采用单样本t检验的方法评价模拟效果。所有数据处理与分析采用SPSS 26.0软件,双侧检验,以P＜0.05为差异具有统计学意义。
2.1 考官的基本情况
参加培训的考官均来自首都医科大学21家临床医学院、附属医院及教学医院,其中男性55名(28.95%),女性135名(71.05%);年龄33～59岁,平均44.56±6.16岁,其中30～39岁46名(24.21%)、40～49岁105名(55.26%)、50～59岁39名(20.53%);职称为中级35名(18.43%)、副高级121名(63.68%)、正高级34名(17.89%),其中84名(44.2%)具有中级及以上教学职称;参加临床教学年限2～37年,平均14.16±7.81年,10年 以 下55人(28.95%),10～19年88人(46.31%),20～29年36人(18.95%),30年及以上11人(5.79%);所从事的专业(二级学科)内科66人(34.74%)、外科37人(19.47%)、妇产科30人(15.79%)、儿科29人(15.29%)、护理20人(10.53%)、急诊科8人(4.21%)。
2.2 模拟评价效果分析
应用单样本t检验,检验值为85,对考官评分结果按照专业进行分析,各专业考官评价结果与标准分数间无显著性差异(P＞0.05)(表1)。其中各专业中均存在相较标准分数误差大于±5分的情况,针对相应考官进行二次培训。
表1 各专业模拟评价成绩分析
2.3 培训效果反馈分析
从需求匹配度、形式匹配度、内容合理性、效果认可度、培训效果自评、软件应用熟练度、继续参加考核意愿、培训流程满意度8个方面测量考官对此次培训效果的认同程度。利用可靠性分析、KMO和Bartlett球形检验进行因子分析适当性检验。本研究得出克隆巴哈系数为0.87,说明上述8个问题的内在一致性较好。KMO为0.82,Bartlett球形检验值为815.18(P＜0.01),说明适合进行因子分析。根据特征根大于1 的原则,采取主成分分析法提取公因子。最终得到1个公因子,累计贡献率为55.71 %,基本符合要求,说明这8个指标基本可以解释大部分测量指标的信息,但解释度略显不足,若能增加指标数量,贡献率可进一步提升。考官对培训各方面反馈评分均值大于10分,其中培训对软件应用熟练度提升效果最好(10.71±0.81),形式匹配度(10.43±1.25)、效果认可度(10.42±1.29)相对较低(表2)。
表2 培训结果反馈 (n=190)
《中国教育现代化2035》中明确指出,要加快信息化时代教育变革,相关政策鼓励医疗健康行业通过多元化培训模式提高教育培训的质量,利用好信息化技术为医疗培训服务。本研究在既有的临床实践技能考官培训模式的基础上,借助多媒体技术、在线考核评价系统等信息化技术,利用云平台突破培训在空间和时间上的限制,形成了全新的“云”上培训模式,有效地提升了培训效率,达到了预期的培训效果,对在实践技能考核中执考规范、评价同质化起到了积极的促进作用。
3.1 改革了传统的考前培训模式
目前,各医学院校和临床医学院均在开展各类型的考官培训,部分单位建立了考官库,考核能力水平得到了日益的提升[7]。但是在各类的临床实践技能考试组织与实施的过程中,考官队伍多为根据考核内容与要求临时组建或抽调组成的,来自多个单位横跨多个专业,稳定性、专业性和熟练程度存在着一定的差异,对当前考试的内涵和规则理解也不够充分,容易造成集中度和规范度欠缺。因此,考前的集中培训是必不可少的。对于成熟考官而言,传统的考核前考官培训通常采用的是考核前一天或者一周进行集中的短时培训,考核规模越大则要求场地和占用资源越大,组织的难度随之增加,造成培训效果的实时反馈愈加困难,所以随着培训规模的扩大,培训效果不断下降。采用云平台的培训模式,不受空间限制,组织难度随之降低,通过研究可以看到,对于培训需求的匹配度、培训形式的匹配度等方面评价分数均在10分以上,可以匹配考官培训的要求。
3.2 在保证质量的同时提高了培训和考核效率
传统的考前考官培训模式多为专家授课讲解,实际操作欠缺,培训后承担考官工作存在标准职责模糊的情况,影响到评价的一致性。通过信息化网络平台应用在考官培训过程中,结合视频还原考核场景,丰富了培训形式,了解考核内涵更为直接,在线模拟考官评分,增加互动,提升了参与度并可集中注意力。随着智能化的考核管理平台的使用,信息化评分系统使用的培训也是保障考核顺利实施的必要条件[8-11]。在研究中可以看到,对于培训内容的合理性、培训效果的认可度评分均大于10分。通过考官自评结合各专业模拟评价的成绩均和标准成绩差异无统计学意义。可以看出,运用此模式培训后可以有效地保障培训质量,并可促进评价标准的统一,培训效果反馈较好。软件应用熟练度评分最高,可以看出应用与实际考核中相同的评价系统进行考官培训可以有效地提升考核效率。同时多专业同时开展培训工作,省时省力,节约人力资源,能有效地实现资源利用最大化,提高培训的整体效率。
3.3 减轻了集中考官培训所带来的疲劳感
随着考核方式的不断完善、内容的不断丰富、规模的日益增加,临床教师在承担教学工作的同时还要承担繁重的临床诊疗工作[12-13]。传统培训模式的集中考官团体培训,占用了组织者、授课教师和考官的整段时间,由于近期公共卫生事件频发,集中培训防疫压力陡增,增加了的考官和管理者的压力和疲劳感。尤其是多单位、多科室参加或者是多中心同时开展的大型考试考核工作,参加和培训的过程中浪费了考官们大量的时间,尤其是培训前后花费在路程上的时间和精力,采用基于云平台的考官培训模式对于培训效果以及减轻培训压力有着不可替代的优势。
基于云平台的学习和培训模式已成为现阶段社会主要发展趋势,将云平台的考官培训模式应用于考核评价工作中,可以切实地提高考核培训的效率和质量。但是也发现了一定的不足,培训过程考官很容易受到干扰,这也从侧面反映出了相关管理人员应当对考官在线学习的实际状况进行实时监督,只有这样才能从源头上促进培训质量的全面提升。
利益冲突所有作者均声明不存在利益冲突
作者贡献声明陈超:提出论文构思,收集、整理相关数据,撰写论文;陈丽芬:提出论文构思,撰写论文;朱庆双、王亚军:总体把关,审订论文;陈晨:收集、整理相关数据
猜你喜欢 云平台考官考核 内部考核童话世界(2020年10期)2020-06-15创新完善机制 做实做优考核当代陕西(2019年9期)2019-05-20发挥考核“指挥棒”“推进器”作用当代陕西(2018年12期)2018-08-04高职院校开展基于云平台网络教学的探索与思考中国市场(2016年36期)2016-10-19企业云平台建设研究中国新通信(2016年16期)2016-10-18报告考官爱你(2015年23期)2015-11-15面试中的“察言观色”党员生活(2014年7期)2014-08-12考驾照华人时刊(2014年6期)2014-07-25家庭年终考核海峡姐妹(2014年5期)2014-02-27面试意林(2011年11期)2011-05-14