目录培训效果评估的运用 简述培训效果评估的方法 培训与开发效果评估的目的 培训效果的评价方法有哪些 简述培训效果评估的目的
培训效果评估的方法
[工作程序和方法]
一、培训评估的步骤
评估是一个由几个核心成分组成的。大多数成功的评估方案是在进行需求分析、提出影响该培训项目的问题的过程中就有所计划的。在实施培训项目之前、之中和之后都要考虑评估问题。
在实施培训项目的过程中,练习和活动都是为达到既定的结果而设计的。在培训项目完成之后,还要对更多的数据进行收集、分析和汇报。评估活动贯穿于培训项目全过程的每一步。作为一种以结果为基础的评估方法,培训评估实施需要完成如下步骤:
1.进行需求分析,暂定评估目标。在山历培训项目开发之前,必须将评估目标确定下来。多数情况下,评估的实施有助于对项目的前景做出决定。实际上,进行评估还有别的原因,这些原因将影响数据类型、数据收集方法的选择。需求分析应提供有助于设立评估目标的信息,确切地讲,就是提供培训项目必须要达到的目标。这些目标是暂定的,逗改搜一旦确定这些数据是现成的或可以收集的,那么,这些目标就可以最终得到完善。
2.如果可能,要建立基本的数据库。在进行评估之前,必须将项目执行前后的数据收集齐备。数据的形式多种多样,并且基本上反映了产生培训需求的条件。收集的数据最好是一个时段内的数据,以便进行实际分析比较。数据收集的方法回答了为什么要实施评估这样一个基本的问题。基本数据反映的信息非常重要,它能反映出工作业绩的缺陷所在。经过需求分析之后,建立基本数据库能使培训人员的注意力集中在培训项目应该带来的变化上。有了基本的数据,操作程序及为解决问题、消除缺陷而设计改进方案也会相对容易一些。
3.选择评估方法。确定培训项目目标之前就选择评估方法也许看上去不合逻辑,但是评估方法的选择会影响培训项目目标的制定。如果没有收集到衡量目标实现的进展信息,确立培训项目目标就毫无意义。因此,如果首先选定收集数据的方法,目标就可量身定做了。在最后确定培训项目的目标之前,选择评估方法能使设想的工作流程有所不同。选择评估方法的过程回答了如何对学习环境、学员和培训内容实施评估这一间题,因为方法的选择必须适合数据的类型。评估方法的类型包括课程前后的测试、学员的反馈意见、对学员进行的培训后跟踪、采取的行动计划以及绩效的完成情况等。
4.决定评估策略。在整个过程中,这一步回答了与评估有关的谁来评估、在什么地方评估和在什么时候评估的问题。这些关键问题的答案在计划评估时是很重要的。因为培训部门和培训项目的学员在评估中都扮演着很重要的角色,有关双方的责任划分问题一定要明确:(1)由谁来实施评估;(2)信息将从参加培训的学员的直接上司还是直接下属处收集;(3)谁来分析数据和解说数据;(4)谁将继续实施后续的评估;(5)谁来决定停止或改变评估程序。
在采取进一步措施之前应当先回答这些问题。多数情况下,应由个人或一个小组负责收集数据比较合理。他们负责分析结果,并将结果告知适当的目标听众。
一个完整的评估和衡量会在培训过程不同的时间段来收集数据。如果和前面几步相结合,这一步包括了形成评估策略的所有问题。
5.最后确定评估项目所要达到的目标。培训项目的目标是在评估计划的有关问题都有答案后进行的,这是因为评估计划会影响目标的最终选择。最理想的是每一个目标应该与收集的基本数据有关。培训项目的目标为课程设计者和学员指明了方向;同时,管理层也据此决定是否应该实施该培训项目。培训项目的目标应当考虑不同层次的特点,应当符合合歼野理化目标所应该具备的普通标准。每个目标必须具有挑战性、明确性、时限性、可实现性和简单易懂的特点。为了达到这些标准,所有的各方都应该参与目标的制定工作。这有助于使培训目标完全满足管理者的要求,并使之贴近部门的工作实际。这个过程的关键还在于它有助于高质量的培训的运作。
6.估算开发和实施培训项目的成本/收益。成本的估算要在培训项目工作启动之前进行,要看该项目是决定做还是不做。从这一点上看,需求分析能够揭示工作表现中明显的缺陷。基本数据库一旦形成,评估策略和培训项目目标一经确定,就要估算开发和启动该培训项目所需要的成本,并与预计的收益进行比较,进而对投资回报率进行预测。成本可以按需求分析、课程开发、培训实施和培训项目评估等分类统计在表格当中加以分析,据此,还可估计各种潜在的现金收益。基本计算公式为:
然而,这一步在有些情况下是没有必要的。如果项目必须进行,就毋须做预算。不考虑成本而去完成一个培训项目,并不意味着成本不重要,相反,这是由于需求受到了经济因素以外其他因素的影响。这样一来,应将主要精力集中在高效开发项目、尽快使之投入使用这个方面上来。尽管如此,培训者还是应该计算成本的,让工作人员知道他们所付出的努力以及他们在该项目上所产生的费用,同时将其作为历史数据记录下来。
7.设计评估手段和。在评估过程中,评估手段是一种收集数据的,用收集到的数据来描述学员在态度、学习和行为方面的变化,或者其他从培训项目实施中能得到的结果。这些可能包括数据记录、问卷、考试、态度调查、面谈、核心小组、观察或工作模拟等。这些手段和应该具有统计的可靠性和易于使用的特点。培训项目开发之前设计评估手段和是非常重要的,因为这样会发现一些意外的信息,这些信息会改变课程开发和课程内容。
8.在适当的阶段收集评估数据。在评估过程中,一个重要的步骤就是收集数据。在适当的时候要收集数据,预先确定的数据收集进度计划也要到位。确定周密的评估计划并不困难,但是,如果不能在适当的时候收集到所需要的数据,评估计划就达不到预期的效果。有各种各样的数据收集方法可以用于此收集数据的过程。
9.对数据进行分析和解释。数据分析有时会遇到巨大的挑战。当数据收齐并达到预先确定的目标之后,接下来的步骤就是对数据进行分析,以及对分析结果进行解释。对问卷调查的反馈结果要列表分类以便介绍,对不同的情况要进行不同的分析。在分析评估数据时,有三类统计分析方法尤其适用,即趋中趋势分析、离中趋势分析和相关趋势分析。
如果方法适当,可以在这一步骤计算培训结果的货币价值。在得出这些价值的时候,要考虑评价因素问题,对培训结果的分析和解释也可以在其他阶段进行。例如,在培训项目不同阶段所收集到的数据往往会在当时的阶段进行分析,以便为培训项目的调整提供信息。此后,可以收集在岗业绩表现数据或后续跟踪数据,将它们与最初的数据合在一起分析,以便评估整个项目。
1O.根据评估分析结果调整培训项目。如果评估结果表明,培训项目没有什么效果或存在较大问题,就要对该项目进行调整或考虑取消该项目。如果培训项目的某些部分不够有效,就可以考虑对这些部分进行重新设计或调整。另外,对于那些不能接受的结果要进行分析,以便确定失败的原因。失败的原因包括:内容不适当、授课方式不适当、对工作没有产生足够的影响或学员本身缺乏积极性等,要对培训项目的每一部分进行分析。
11.计算投资回报率。如果要考虑培训的经济效益,就要计算投资回报率。最基本的投资回报率的计算公式如下:投资回报率=项目净利润÷项目成本*l00%。计算投资回报率之后,要将它们与培训项目的目标进行比较。有时候,对这些目标的确定是以公司资金支出标准为基础的,其他的则基于经理们对培训项目的期望结果,或者基于他们对实施该项目的要求程度。对投资回报率的计算应该得到足够的重视,因为它决定着评估的最终手段。除此之外,它正在成为人力资源培训与开发职能商业化的一个重要的组成部分,并且企业越来越重视其基本的效果。这也成为衡量用于人力资源开发活动的资金的应用是否有效的坚实基础。
12.对培训项目的结果进行沟通。有许多人要得到评估信息,其中,有四种人是必须得到评估结果的:
(1)培训开发人员,他们需要这些信息来改进培训项目,只有在反馈意见的基础上精益求精,才能提高培训项目的质量。
(2)管理层,因为他们当中有一些是决策人物,决定着培训项目的未来。评估的基本目的之一就是为决策提供基础。该项目是否值得做,是否有必要为继续这种努力投入更多的资金,应该向管理层沟通这些问题及其答案。
(3)学员,他们应该知道自己的培训效果怎么样,并且将自己的业绩表现与其他人的业绩表现进行比较。这种意见反馈有助于他们继续努力,也有助于将来参加该培训项目学习的人员不断努力。
(4)学员的直接经理。当学员参加培训学习时,经理要做一些调整工作,并且要对学员的成功表示很感兴趣。
在培训过程中,对培训结果的沟通往往被人们忽视。尽管经过分析和解释的评估数据将转给某个人,但是,当应该得到这些信息的人没有得到这些信息时,就会出现问题。在沟通有关信息时,一定要做到不存在偏见且有效率。
二、培训评估的层次和方法
若评估某一培训项目,应明确根据什么来判断项目是否有效。对培训效果的评估可在四个层面上进行:
(一)反应评估
反应评估是第一级评估,即在课程刚结束时,了解学员对培训项目的主观感觉或满意程度。第一级评估目标往往包括对培训项目的肯定式意见反馈和既定计划的完成情况。
反应层面需要评估以下几个方面:内容、讲师、方法、材料、设施、场地、报名的程序等。对这个层次的评价,首先要有总体的评价,比如询问学员:你感觉这个课怎么样?你会向其他人推荐这个课吗?但是这样容易产生一些问题,比如以偏概全、主观性强、不够理智等。因此还必须有涉及以上内容的更细致的评估方法。适合的方式有问卷、面谈、座谈、电话调查等。
这个层面的评估易于进行,是最基本、最普遍的评估方式。但它的缺点显而易见,比如;因为对老师有好感而给课程全部高分,或者因为对某个因素不满而全盘否定课程。
(二)学习评估
学习评估是第二级评估,着眼于对学习的度量,即评估学员在知识、技能、态度或行为方式方面的收获。评估的方法很具体,无论是测试、模拟、技能练习还是教师的评价,都是为了评估学习的情况。往往在培训之中或之后进行,由教师或培训辅导员来负责实施。
学习层面主要的评估方法有:考试、演示、讲演、讨论、角色扮演等多种方式。这个层面评估的优点是:对培训学员有压力,使他们更认真地学习;对培训讲师也是一种压力,使他们更负责、更精心地准备课程和讲课。学习是行为改善的第一步。但问题在于压力是好事也可能是坏事,有可能使报名不太踊跃。再者,这些测试方法的可靠度和可信度有多大?测试方法的难度是否合适?对工作行为转变来说并非最好的参考指标。
(三)行为评估
行为评估即评估学员在工作中的行为方式有多大程度的改变。行为层面的评估主要有观察、主管的评价、客户的评价、同事的评价等方式。这个层面评估的好处是:培训的目的就是改变学员的行为,因此这个层面的评估可以直接反映课程的效果;可以使高层领导和直接主管看到培训的效果,使他们更支持培训。
对于这个第三级评估来讲,其目标涉及更广泛的领域,即培训的应用领域,包括重要的在岗活动。评估的实施时间往往是在培训结束后的几周或几个月之后。由于这种评估将涉及几个方面的参与,包括培训和开发人员、区域培训师或地方经理的参与,所以在运作的初期就明确这个问题是很重要的。
但是,这个层面的评估要花很多时间和精力,人力资源部门可能忙不过来;问卷的设计非常重要却比较难做;因为要占用相关人员较多时间,大家可能不太配合;员工的表现多因多果,如何剔除其他因素的影响也是一个问题。
(四)结果评估
这是第四级评估,其目标着眼于由培训项目引起的业务结果的变化情况,其目标可以包括对每个项目的度量方法。通过诸如质量、数量、安全、销售额、成本、利润、投资回报率等企业或学员的上司最关注的并且可量度的指标来考查、判断培训成果的转化,与培训前进行对照,看最终产生了什么结果。时间的间隔取决于学员多长时间才能取得持续不变的业务效果,往往是培训后的几个月。收集四级评估的数据所涉及的责任人包括学员自己、主管、区域培训协调员或者外部的评估人员。
这种评估方式的优点显而易见,因为企业及企业高层主管在培训上投资的根本目的,就是为了提高这些指标。如果能在这个层面上拿出翔实的、令人信服的调查数据,不但可以打消高层主管投资于培训的疑虑心理,而且可以指导培训课程计划,把有限的培训费用用到最能够为企业创造经济效益的课程上来。
但是,这个层面的评估首先需要时间,在短期内是很难有结果的;其次,对这个层面的评估,人们才刚刚开始尝试,缺乏必要的技术和经验;第三,必须取得管理层的合作,否则就无法拿到相关的数字;最后,多因多果,简单的对比数字意义不大,必须分辨哪些果与要评估的课程有关系,在多大程度上有关。
培训评估层次与方法见表3—1。
一、培训效果与培训评估的含义
培训评估是指收集培训成果以衡量培训是否有效的过程。培训效果是指企业和受训者从培训当中获得的收益。对受训者的好处是,他们可以学习各种新的技能和行为方式;而企业则可获得销售额的上升及顾客满意人数增加的益处。
企业培训评估的价值与作用在于,培训评估是培训工作的最后阶段,培训评估技术通过建立培训效果评估指标及评估体系,对培训是否达到预期目标、培训计划是否具有成效等进行检查与评价,然后把评估结果反馈给相关部门作为下一步培训计划与培训需求分析的依据之一。
二、培训评估使用的成果或标准
培训的成果或标准即是培训者和企业用来评价培训项目的尺度。无论是培训实践人员还是理论研究人员都认为需要更全面的培训标准模型,也就是说,还存在许多其他的对评估培训项目有用的培训成果。这些成果包括态度、动机及投资回报率。这样,就将培训成果分成了五大类:认知成果、技能成果、情感成果、绩效成果及投资回报率。
三、评估的作用和内容
培训评估实质上是对有关培训信息进行处理和应用的过程。要真正提高对培训评估的重视,首先要了解培训评估的重要作用。同时,由于培训管理者和培训实施者提供的培训产品的好坏并非只决定于培训活动的最终环节,而决定于培训过程中的每一步做得好坏。因此,培训评估意义的体现来自于对培训过程的全程评估。全程评估可以分为三个阶段,即培训前的评估、培训中的评估和培训后的评估。此外还有一种起承前启后作用的评估——年度绩效考核评估。
(一)培训前评估的作用和评估内容
1.作用
(1)保证培训需求确认的科学性;
(2)确保培训计划与实际需求的合理衔接;
(3)帮助实现培训资源的合理配置;
(4)保证培训效果测定的科学性。
2.评估内容
(1)培训需求整体评估;
(2)培训对象知识、技能和工作态度评估;
(3)培训对象工作成效及行为评估;
(4)培训计划评估。
(二)培训中评估的作用和主要内容
1.作用
(1)保证培训活动按照计划进行;
(2)培训执行情况的反馈和培训计划的调整;
(3)过程监测和评估有助于科学解释培训的实际效果。
2.评估内容
(1)培训活动参与状况监测:目标群体的确认;培训项目的覆盖效率;培训对象参与热情和持久性。
(2)培训内容监测:培训的构成或成分;培训强度;提供的培训量;培训的频率;培训的时间安排。
(3)培训进度与中间效果监测评估:培训组织准备工作评估;培训学员
参与培训情况评估;培训内容和形式的评估;培训讲师和培训工作者评估;“现代培训”设施应用的评估。
(4)培训环境监测评估。
(5)培训机构和培训人员监测评估:培训机构的规模和结构特征;培训机构的内部分工状况;培训机构服务网点分布状况;培训机构的领导体制;培训机构的沟通和协调机制;培训者的素质和能力;培训者的工作安排;培训者的工作态度。
(三)培训效果评估的作用和主要内容
1.作用
(1)效果评估有助于树立结果为本的意识;
(2)效果评估有助于扭转目标错位的现象;
(3)效果评估是提高培训质量的有效途径。
2.评估内容
(1)培训目标达成情况评估;
(2)培训效果效益综合评估;
(3)培训工作者的工作绩效评估。
培训效果评估是企业培训体系中不可或缺的一个重要环节,也是检验培训工作做得好坏的重要手段。它可以使培训管理者明确培训项目、内容、讲师选择的优劣,了轿野亏解培训预期目标的实现程度,为后期培训计划、培训项目的制定与实施等提供有益的帮助。实践中我们的培训评估主要采用柯氏的四级评估模式(简称4R模式): 1、学习评估:测定受训者的学习收获程度(知识、技能、态度、行为方式等方面)。主要采取考试、现场问答、模拟测试、写心得体会的评估方式等。 2、行为评估:主要考察受训者知识运用程度(培训后,其态度、行为方式的变化和改进情况)。 我们一般通过行为观察、每月考核(主管评价)及员工关键事件盘点等来予以验证。若对于工作心态、管理方式类的培训,我们一般在培训结束时会布置行为转变行动计划表,到时看其行动计划表的实际完成情况等。3、反应评估:评估受训者的满意程度(对讲师、课程、培训组织等)。 每次培训后都会做一个培训满意度的反馈调查,主要以现场发放调查表的形式来完成,调查表事先精心设计,主要涵盖总体评价、培训课程、讲师授课、培训组织、合理化建议等几个核心的调查内容。当然,这并不是唯一脊桐手段,我们还会通过现场观察培训氛围、培训纪律反馈、员工抽样访谈等方式进行补充调查。4、成果评估:衡量培训带来的经济效益(培训后,受训者在一定时期内所创造的工作业绩增长变化评估)。 是最后评估项,主要是通过绩效考核,更多的是一些量化数据的对比反馈,如质量、销售额、成本、项目效率、人员晋升培养结果等。 另外,在年度培训结束后,我们还会核算整个年度的培训投资回报率的变化情况,考查销售额或利润增量与培训课时和费用增量之间的关系,以此衡量我们年度培训工作的进步情况,尤其会特别关注和核算本年度新入职员工进步的情况。因为,我们觉得培训对新员工的改变和造成的结果影响较大。 评估的方式我们一看就懂,一学就会,难的是让评估的结果和实际的情形最大限度的相符。在专业上我们把它叫做闭神信度和效度。提高信度和效度的有效途径是科学地设计好评价的内容、分数和权重,并控制好实施评价中的全过程。
培训效果评估是企业培训体系中不可或缺的一个重要环节,也是检验培训工作做得好坏的重要手段。它可以使培训管理者明确培训项目、内容、讲师选择的优劣,了解培训预期目标的实现程度,为后期培训计划、培训项目的制定与实施等提供有益的帮助。实践中我们的培训评估主要采用柯氏的四级评估模式(简称4R模式):
1、学习评估:测定受训者的学习收获程度(知识、技能、态度、行为方式等方面)。主要采取考试、现场问答、模拟测试、写心得体会的评估方式等。
2、行为评估:主要考察受训者知识运用程度(培训后,其态度、行为方式的变化和改进情况)。 我们一般通过行为观察、每月考核(主管评价)及员工关键事件盘点等来予以验证。若对于工作心态、管理方式类的培训,我们一般在培训结束时会布置行为转变行动计划表,到时看其行动计划表的实际完成情况等。
3、反应评估:评估受训者的满意程度(对讲师、课程、培训组织等)。 每次培训后都会做一个培训满意度的反馈调查,主要以现场发放调查表的形式来完成,调查表事先精心设计,主要涵盖总体评价、培训课程、讲师授课、培训组织、合孝肆理化建议等几个核心的调查内容。当然,这并不是唯一手段,我们还会通过现场观察培训氛围、培训纪律反馈、员工抽样访谈等方式进行补充调查。
4、成果评估:返誉衡量培训带来的经济效益(培训后,受训者在一定时期内所创造的工作业绩增长变化评估)。 是最后评估项,主要是通过绩效考核,更多的是一些量化数据的对比反馈,如质量、销售额、成本、项目效率、人员晋升培养结果等。
另外,在年度培训结束后,我们还会核算整个年度的培训投资回报率的变化情况,考查销售额或利润增量与培训课时和费用增量之间的关系,以此衡量我们年度培训工作的漏慎段进步情况,尤其会特别关注和核算本年度新入职员工进步的情况。因为,我们觉得培训对新员工的改变和造成的结果影响较大。
评估的方式我们一看就懂,一学就会,难的是让评估的结果和实际的情形最大限度的相符。在专业上我们把它叫做信度和效度。提高信度和效度的有效途径是科学地设计好评价的内容、分数和权重,并控制好实施评价中的全过程。
培训效果评估的四个方敬配法:
1、员工的学习反馈
学习反馈是通过培训后,了解学员对培训过程中,以及培训后所产生的反应与感受。主要收集的信息情况可分为:
①对培训讲师的认同度:培训讲师的培训技巧、亲和力、以及现场场控度等。
②对内容设计的好感度:内容的实操性、过程中的互动性、学习的积极性等。
③对课件质量的认可度:培训教材通俗易懂、可视性、以及制作的专业度等。
④对课程组织的合理性:培训课程组织的时间安排、以及课时规划是否合理。
⑤对培训知识的落地性:理论与实际的结合,未来在工作中是否具备实操性。
评估的方法:可以通过调研问卷、评估访谈等形式来收集信息。
2、培训学习的效果
在学员完成培训后,及时地了解学员的收获。要围绕知识、技能、态度这3个方面来测试学员培训后,对课程内容的理解与沉淀。对于讲师而言,既是对其培训能力的检验,同时,也能从中寻找不足,可以在后期工作中加以改善。
评估的方法:可以通过培训内容测试、培训调研问卷、优秀学习案例等方式进行分析。
3、组织行为的改变
通过针对性的培训,在实际的工作过程中,去观察、发现员工的组织行为,是否在知识、态度、技能上有所旦枝改善,是否达到的培训目标的预期。
评估的方法:可以通过各岗位上下层级的工作观察、绩效结果、日常表现等方式评估。
4、最终产生的效果
通过完整且的培训,整个组织内部是否发生了应有的变化。观察员模稿敏工的日常工作表现、分析员工的绩效结果,来评估最终对企业经营效益上带来了哪些提升,所有的培训最终都是围绕经营目标的达成以及整体效益的提升这两大关键核心。
评估的方法:可以通过企业内部效率的提升、企业外部经营拓展氛额的提升、以及整体绩效达成结果的提升,3个维度来评估最终的效果。
培训效果的评估方法主要包括:问卷评估法、访谈法、测验法、360度评估
培训效果的评估方法主要包括:问卷评估法。评价问卷没有统一的格式,题目也不固定。评估人员可根据评估目的、评估要求和评估重点自行设计。
360度评估。360度评估的核心特征:一是全方位、多角度,评估者由上级、同事、下级、客户以及被评估者本人共同构成;二是可以动态地检查发展效果;三是重视信息反馈和双向交流的理念;四是减少误差,实事求是。
访谈法。知念采取访谈方式或者集体讨论方式,通过面对面的交流分享、互相启发,往往能够达到意想不到的效果;测验法。培训过程中,受训员工在参加培训前后各进行一次测验,可根据测评的卜猛中结果进行对比分析。
培训前评估的作用:保证培训需求确认的科学性;型山确保培训计划与实际需求的合理衔接;帮助实现培训资源的合理配置;保证培训效果测定的科学性。
培训中评估的作用:保证培训活动按照计划进行;培训执行情况的反馈和培训计划的调整;过程检测和评估有助于科学解释培训的实际效果。培训效果评估的作用:效果有助于树立结果为本的意识;有助于扭转目标错位的现象,是提高培训质量的有效途径。