设为首页 登录 注册
首页 中人社区 中人博客
查看: 34021|回复: 68
打印 上一主题 下一主题

培训效果评估中需要注意的地方之一

    [复制链接]

423

主题

311

听众

7466

积分

论坛顾问

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

签到天数: 827 天

[LV.10]以坛为家III

注册时间
2010-7-15
最后登录
2018-4-26
积分
7466
精华
61
主题
423
帖子
4120

2012中人博客人气博主勋章 2012中人社区群英谱勋章 2011年人气版主勋章 原创先锋 精华大师 阳光普照勋章

跳转到指定楼层
楼主
发表于 2011-7-28 18:57:07 |只看该作者 |倒序浏览

上次发布了《Phillips的“五级六指标”模型》,之后收到很多消息、留言或者问题,对培训效果的评估上显得很无奈,也很迷惑,更有迷糊,说:培训效果评估,很多人说这是形式,没有效果。常诚试着把所遇到的问题汇总回答如下,期待能带给大家一些启示。当然,有些地方只是常诚的见解,不一定对,欢迎参与讨论,让我们更一步清晰明白:对于培训效果评估究竟如何做才是最有效的。

论坛及线下交流群提及的问题,常诚进行了归类,具体表现形式上:
第一、在培训计划制定上没有包含对培训评估方法的选择;
第二、在培训评估系统设计上选择了不当的评估形式,没有制定完整的合理性培训评估计划,每次培训完了没有用心进行评估总结,更不要说建立良好的培训评估反馈系统和进行有效反馈;
第三、在培训评估标准制定上,对培训效果的评估没有形成体系,或者是搞主观性过强的反应评估;或者是给受训人员带来压力的学习评估;或者是占用时间和经理太多的行为评估;或者是评估标准有歧义存在缺陷;这样的评估结果,肯定就会导致信度很低。
下面,常诚结合一些案例对以上表现形式进行分析,努力寻求解决之道:
一:在制定培训计划时,不要忘记选择培训评估方法!
培训结束后评估方法的选择,是衡量培训成功与否的重要途径,在《Phillips的“五级六指标”模型》帖子中,曾说到:“培训评估:回答的是“做得怎样”的问题,也就是对当初为啥搞培训的出发点和初衷进行验证,对培训实施的过程进行跟踪,对培训后产生的成果进行衡量测量。所以,培训效果评估是贯穿于整个培训的循环中的,而不是等到培训搞完了才来评估。”以下是网络上流传的一份培训计划:
关于新会计准则操作培训项目计划

培训目标

满足企业财务情况运转需要,提高企业财务管理水平

受训人员

财务部全体人员

培训内容

新会计准则操作培训

培训时间




日 。1天

培训地点

**市委党校

培训方式

外派脱产培训

培训讲师

**财务培训机构知名讲师:***

培训组织

HR部门培训主管

培训预算

5000

这份培训计划中就没有把培训评估方法作为重要内容选择进去。那么就会导致目标能不能实现,不好衡量。
培训评估对所有参加培训的公司来说都是不可少的一个环境,可以对培训效果进行正确、合理的判断、确定受训人员知识、技术能力的提高或行为表现的改变是否直接来自培训本身,找出培训的不足,发现新的培训需求,客观地评价培训者的工作,为管理层决策提供所需信息。
因此,在制定培训计划时,应该确定培训实施中所采用的评估方法,包括如何考核培训的成败、如何进行中间效果的评估、如何评估培训结束时受训人员的学习效果等等。
第一、在有关培训评估方法的选择上,有观察法、问卷调查法、测试法、情景模拟测试、绩效考核法、360°考核、前后对照法、时间序列法和收益评价法等等。
第二、对培训效果评估的实施上,应该从反应层、学习层、行为层和结果层进行,也就是采用Kirkpatrick的四层次理论。论坛中有关这样的理论和模型,这里就不再多说,各位可以参考以下帖子:
虽然说:“培训不是万能的”,但是“没有培训是万万不能的”!任何一项培训都必须接受效果评估,否则培训就流于形式起不到任何作用。为避免这个形式,和避免培训的盲目性,作为HR就应该建立起一整套科学有效的培训评估系统。这个系统应该是对培训前、培训中、培训后各个环节进行检验的逐步深化的过程。


二:根据实际情况采取适当的评估形式。
根据具体的培训情况(目的、对象、内容、方法与技术等等),可以采用具体的评估形式来评估培训效果。但是若采用了不恰当不合适的评估形式,将直接影响对培训效果的评估,间接影响公司的决策和下次培训计划的制定。
A公司决定对各地业务员进行营销培训,为期三周。HR经理让培训主管小夏全面负责,并让其做好本次培训的评估分析。小夏对此事非常认真,积极设计了评估过程中的测评问卷,计划对培训规程跟进评估,从而形成有效的评估报告。在培训期间,小夏每三天就会对受训人员进行问卷测试,总结培训效果和向大家说明情况,但是到了第二周,许多业务员就不愿意做问卷了,说:“我们是来学习营销知识和经验的,不是来做问卷测试的……”小夏的计划很难进行下去,最后也没有拿出一个很好的评估报告。
与管理中的控制功能相似,在公司培训的某一项目或课程结束后,一般要对培训效果进行一次总结性的评估或检查,以便找出参加人员究竟有哪些收获或提高。通过评估可以对培训效果进行正确合理的判断,以便于了解某一项目是否达到原定目标和要求。小夏的问题在于他只是主观地想要进行培训评估,而忽视了评估形式的正确应用,造成员工抵触情绪。
一般说来,培训效果评估的形式主要有:
第一、非正式和正式评估。非正式评估就是评估者依据自己的主观性的判断,而不是用事实和数据来加以证明。正式评估就是在一些正式的场合,尤其是当评估结论要被管理层用来作为觉得的依据,或者为了向特定人员说明培训效果时需要的评估形式。
非正式评估一般不需要记录太多的信息,但有时要记录下某些认为对评估有价值的信息,比如参训人员的表现、态度和一些特殊困难。这种方式在于可以使评估者能够在参训人员不知不觉的自然状态下进行观察,减少了紧张情绪,增强了信息的真实性和评估结论的客观性有效性,方便易行,几乎不需要耗费什么额外的时间和资源。
正式评估往往具有详细的评估方案、测度工具和评判标准。尽量剔除主观因素影响,从而使评估更可信:在数据和事实的基础上做出判断,使评估结论更有说服力,更容易用书面形式表现出来,可以将评估结论和最初计划比对核定。
第二、建设性评估和总结性评估。建设性评估就是在培训过程中以改进而不是以是否保留培训项目为目的的评估;总结性评估就是在培训结束时,对参训人员的学习效果和培训项目本身的有效性所进行的评估。
建设性评估经常是一中非正式的主观评估。当进行建设性评估时,需要保证定期评估不过分频繁,也不能让参训人员有一种他们一直在进行简单乏味和重复学习的感觉。不然的话,建设性评估就无法发挥他的激励作用,其他一些优势也会因此丧失殆尽。选择这种评估,有助于参训人员学习的改进,帮助参训人员明白自己的进步,从而使其产生某种满足感和成就感,这种满足感和成就感在参训人员后一阶段的学习中,有着巨大的激励作用。
总结性评估经常是正式和客观的,具有较强的说服力。适用的情况包括:当评估结论将被作为决定给予参训人员某种资格,或者为组织的决策提供依据时才采用。但是,和建设性评估相比,总结性评估不能作为培训项目改进的依据,无助于参训人员学习的改进,只能决定最终结果:是否给参训人员某种资格或者组织是否应该做出某种决策。
三:制定的合理培训评估计划要完整。
做好培训评估工作,首要的就是制定完整的培训评估计划,包括对评估人员、评估对象、评估数据库的建立、选择恰当的评估形式等如何开展和进行要有一个详实合理的计划。在选定评估人员、评估对象和完善评估数据库之后,评估人员需要选择恰当的评估形式。只有在确定了评估形式的基础上,评估人员才能设计出合理的评估方案并选择争取的测度工具,同时对评估的时机和进度做出准确的判断。
B公司过去几年对员工培训的投入很大,开展的培训项目也是品种繁多,但是大家都感觉到收效甚微,董事长也认为是这样,就安排HR部门的培训主管小刘对培训效果进行评估。小刘很积极地对公司进行的各个培训项目制定十分详尽的评估计划,一一实施。但是一年下来,公司在培训评估方面的费用远远超出了董事长的想象,使得公司培训费用很高,董事长很头疼,小刘也很困惑,百思不得其解,如何才能做到有效评估并制定合理的评估计划?
这个案例中,小刘做到了对培训项目一一进行详尽评估,但最终造成公司高额培训费用支出。由于培训的需求呈现增长的趋势,因而实施培训的直接费用和间接费用也在持续上升,为了避免不必要的浪费,无须对所有的培训情况进行全部评估,而是应该选择关键的、对公司员工职业发展、公司战略计划有很大关系的培训去评估,同时制定完整合理的培训评估计划,才能做好培训评估工作,不至于造成很多不必要的浪费和困惑。
制定培训评估计划主要从以下方面进行:
第一、选择培训评估人员。评估人员不用细说,可以来自公司内外部。
第二、选择培训评估对象。培训的最终目的是为了给公司创造价值,因此评估主要选择那些影响员工技能提高、公司利润增长、竞争力提升的培训项目,具体应针对以下情况进行评估:
1.开发的课程应着重于培训需求、课程设计、应用效果等方面。
2.培训人员的课程应着重于教学方法、教学态度、课程质量等综合能力方面。
3.培训方式应着重于课程组织、教材、课程设计、应用效果等方面。
第三、建立陪评估数据库。培训数据按照是否用数字来衡量的标准分为硬数据和软数据,也就是直接数据和间接数据。硬数据一般是产出、质量、成本、时间,具有代表性的业绩衡量标准。软数据一般是工作习惯、氛围、新技能、发展、满意度和主动。具体可以参照常诚的另一个帖子《Phillips的“五级六指标”模型》。
第四、选择培训评估形式。评估形式的选择以评估的实际需要及这种形式评估所具有的特点为依据。只有在确定了评估形式的基础上,才能设计合理的评估方案并选择正确的测度工具,同时对评估的实际和进度做出准确的判断。
第五、选择培训评估方法。评估方法的选择必须适合数据类型。评估方法的类型主要课程前后的测试、参训人员的反馈意见、对参训人员进行的培训后跟踪、采取的行动计划及绩效完成情况等。培训效果的评估主要有定性和定量评估。方法在前面已经说了。
第六、确定方案和测度工具。评估方案构成整个评估过程的框架,测度工具则提供了收集数据、获取信息的途径。评估方案和测度工具与培训项目、参训人员的匹配程度则直接决定了培训评估能否取得成功。
四:千万别忘记对培训评估进行总结。
培训评估结束后要写培训评估报告,评估报告用来对培训小乖乖评估的总结,要注意其代表性和真实性,全面总结评估工作,纵观培训的整体效果,避免以偏概全。
在现实中,很多人写报告都是三言两语,不知道如何写,有的在做培训的时候根本就没有想到要做报告总结。但是写这样的报告的目的是向哪些没有参与评估的人员提供结论并对此做出解释。自己做了啥,应该向上级报告。更重要的是通过报告,向上级提供培训的结论和建议,供上级决策。
培训评估总结报告的结构和核心内容,以Phillips的“五级六指标”为例如下表:
项目

核心内容

描述

一般信息

背景信息

通过对项目需求分析的概括来说明评估的基础以及重要的结论和意义;提供培训项目的大纲。

评估目的

对照预先设定的目标,评价培训项目所带来的贡献大小,而不是判断培训投资是否合理或培训是否有必要继续存在

评估方法

评估的级别

根据培训需求和目的,确定哪一级评估适合需要评估的项目,争取进行第五级评估。在无法将培训成果转化成货币价值时,至少应提供第四级业务影响因素的改进作为无形收益

ROI

系统和严谨的5个步骤,要求能将业务影响因素转换成货币价值,同时项目成本要包括所有的成本

数据收集

数据的分类:硬数据和软数据。培训前后和期间数据的收集

鉴别培训效果

至少采用2种方法对培训效果做出鉴别

将数据转化成数字

从最精确的转化策略向最不精确的策略依次进行选择,可选择多个策略,并考虑数据的可获得性和便利性

数据转换及分析

财务数据

由硬数据转换而来的货币价值的有形收益

非财务数据

无法转换成货币价值的无形收益

项目成本

成本阶段和分类矩阵

*四个阶段:需求分析、项目设计、项目实施和项目评估
*成本矩阵:2个大类16个小类

结果

一般信息

*总体反馈
*目标的实现状况

结果1:反应/满意度,行动计划

数据来源、数据统计和分析、结论

结果2:学习成功

数据来源、数据统计和分析、结论

结果3:应用与实施

数据来源、数据统计和分析、结论

结果4:对业务的影响

数据来源、数据统计和分析、结论

结果5ROI

数据来源、数据统计和分析、结论

结果6:无形收益

数据来源、数据统计和分析、结论

障碍和促进因素

障碍

对培训项目产生负面影响的因素

促进因素

对培训项目产生积极影响的因素

结论与建议

结论

提供基于所有结果的结论,简要说明每个结果得到的方法

建议

就培训项目提供一个建议清单,并就每一条建议给予简要解释

附录

补充资料

原始资料及相关图表,如调查问卷、访谈记录、绩效档案、行业标准、技术模型等。

五:评估了要反馈,建立良好的培训评估反馈系统
C公司老板老张在过去一年投入了大量的人力和物力,不断地对员工进行培训,可是一年的轮流培训下来,公司产品的市场开发仍然很不理想。老张感觉投入如此大的费用对员工进行培训,销售额却不增长,公司利润很难保证。于是请来外部咨询公司诊断,发现:C公司的培训时间和投入都很充分,培训师大多来自专家、学者,这些培训师对行业进展和新产品都有详细的了解,但是普遍没有太多市场开发的经验和技巧,而负责营销的专家则是在其他经营领域很有经验,但并不了解公司产品和产品所在行业。
这案例就充分说明了:建立良好的培训评估反馈系统可以更好地使员工认识到培训带给自己的提高,使培训师认识到培训规程还有哪些不足,使公司培训主管通过培训评估认识到某次培训成功与否、对公司参训人员工作能力的提高有多大帮助、对公司的未来发展有多大影响、以后的培训项目要汲取的经验等等。
建立评估反馈系统涉及参训人员、参训人员的直线上级、培训师和培训机构、HR部门或者培训部。首先将培训评估反馈给参训人员,使他们认识到业绩的改进在多大程度上与培训项目有关,以后这样的培训项目应该参加还是没有必要。其次,参训人员将自己的结论反馈给直线上级,直线上级将根据反馈结合培训后参训人员的业绩改进程度,得出培训的效果是否符合评估的结论,而业绩提升中有多少是由于培训以外的其他因素造成的。最后,参训人员所在部门将观察结果反馈给培训部门,培训部门再将信息反馈给培训师或者培训机构,这样就可以从工作实践中得出培训的真正效果,从而进一步发现培训中的缺陷,完善培训计划的设计,更好第为公司战略发展、员工职业发展服务。
这里还需要注意的是:对于公司来讲,这样的培训实施、评估、反馈的过程不是一次、两次,而是一个长期的过程。因此培训评估也应该是一个长期连续的行为。如果评估是一次性的,它的建设性远远不及破坏性,因为一次性的评估会使人觉得这是领导层的不重视和形式主义,从而产生消极作用。培训作为公司行为,其目的在于改变员工的思维方式和行为习惯,提供公司绩效,增强公司竞争优势。但真正影响培训和开发效果的人不是培训人员而是参训人员的直线领导,如果他们没有这方面的意识和技能,培训和开发的措施就会落空。所以必须从战略上、从领导层面上去重视培训的实施和评估,将培训作为公司人力资源发展的一个重要的必不可少的环节去认真对待。
六:严格按照柯氏四个层次理论来执行,将培训效果评估形成体系。
相信以下做法是很多企业里的普遍做法:
每次培训项目结束完了,为检验培训效果,大部分HR是这样做的:
首先对所有参训人员发放满意度调查问卷表,接着对部分参训人员进行访谈,了解对本次培训项目的主观感受及满意度;再次采用闭卷考试和操作测试的方法检验参训人员的实际收获。最后,HR将以上步骤中收集来的资料,撰写一份评估报告交给总经理审核。就这样结束了培训项目,每次如此,年年如此。
这样的做法,您是吗?
这样的做法,仅仅是对培训效果的前两个层次(反应层次和学习层次)进行了评估。这两个评估都是在培训结束后就可以进行的,只检验了短期体现出来的效果,而对于培训所能给公司带来的好处并没有进行长期的跟踪考察。要想做好培训效果的评估实施,则需要严格按照柯氏四个层次理论逐级进行:

反应层次

学习层次

行为层次

结果层析

评估目的

考核参训人员对培训方案的反应,参训人员对培训项目结构和培训师的看法,以及培训内容是否合适、方法是否得当的看法等

针对培训内容和培训项目的整体情况及受训人员对培训内容的掌握程度进行评估

评估培训项目使参训人员在工作行为和表现方面产生的变化

培训对公司发展带来的可见的和积极作用。评估的核心问题是评估培训是否对公司的经营成果产生影响

评估方法

观察法、培训评估问卷和培训评估调查法等

纸笔测试法、问卷调查法、情景模拟测试、转学学习心得报告等

前后对照法、时间序列法、360°调查法和绩效考核法

前后对照法、时间序列法、360°调查法、绩效考核法、收益评价法等

评估时间

培训管理人员的评估在培训中就可以进行,参训人员和培训师的评估在培训结束后马上进行

在培训的后期进行,并把成绩反馈给参训人员及其上级

培训前期得到基准数据(用于对比),培训结束后1-3个月甚至延续至一年后

培训结束后1个月到1

评估内容

1培训组织情况,包含通知时间、环境与设施、课程及教材、住宿安排及服务等
2培训师情况:其的能力、语气语调和场面控制能力等
3自我评估:投入状况、积极性和学习内容的评估等

1学习内容进行测试和提问,要求参训人员运用所学的知识进行解答,可以氛围基础知识点和情景模拟问答
2在实际操作性的培训中,考察参训人员对关键知识点的掌握程度
3在学习了一些专业性岗位的课程后,要求参训人员按照学习的内容和时间提出自己的问题和解决方案,并交给参训人员的上级负责监督执行

1培训结束时,要求参训人员制定行为改进计划,列明现在的情况和需要改进方面。跟踪评估的时间。培训师、参训人员与其上级讨论详细的实践计划,并由其上级和管理人员备份
2在约定的评估时间内,培训管理人员需要保持与参训人员上级的评估交流
3约定的评估时间结束后,参训人员及其上级对培训效果进行评估。培训管理人员也可以参加评估。
4为保证评估的公平性,可以采用360°调查法进行评估,参训人员及其上级、同事参与评估

1硬性指标:产出、质量、成本、时间等
2软性指标:态度激励、满意度、工作环境、工作习惯、工作新技巧的使用、公司文化及创造性等。

:在反应层次的评估上避免太主观。
先看一个案例:某公司在调查问卷上既有封闭式问题的满意度按1-5打分,又包括需要参训人员自己填写的开放式问题。拿到问卷后,这四人说了起来:
A说:“我就喜欢这老师的风格,特幽默,感觉上课很轻松,学到了不少东西,我给这次培训的打分都是5分。”
B说:“我对老师的感觉倒是一般,不过这次培训没有占用周末时间,还让我们来这么的好玩地方,既能学习,又能万,我满意,都打4分吧。”
C说:“你们都高兴,我可是不满意的哦。我觉得这次虽然外在的一些因素安排得好,但是真正核心的培训内容安排得有点问题,跟咱们的工作联系不大,也不知道以前调查过的咱们对培训的真正需求他们考虑没考虑。我全部打2分。”
D说:“我觉得你们都说得很片面。这问卷里面不是分了好几项的么?有关培训师、组织者、课程内容都在问卷上了,就应该就事论事,给这次培训公正的评分。”
相信这样的情景在很多公司都类似发生过。反应层次评估的几个方面在上面已经说到了。这里说一下进行反应评估时,应该遵循的原则:
第一、确定希望了解的事项。对每个培训项目来说,都有必要针对培训主题和培训责任人进行培训反应方面的评估。且在每个培训项目的评估中,将这2方面的因素单独进行评估。此外,培训人员还可能就培训条件、课程安排、培训期间的后勤保障、案例分析、视听辅助材料、分发的培训资料等事宜对参训人员的反应进行调查和了解。
第二、设计一部分能够量化的反应评估表,尽力做到两点:一是能够提供尽可能多的信息;二是仅仅需要花费尽可能少的时间。培训项目结束后,多数参训人员会迫不及待地离开场地,他们并不像在评估表格填写花费过多时间。有些参训人员甚至认为培训人员根本不会对他们的意见进行考虑。
第三、鼓励参训人员提交书面的意见和建议。汇总评分情况,仅仅反映了参训人员的部分培训反应情况。单凭得分情况还不能提供参训人员培训反应的原因,也不能说明怎样才能对培训项目做出改进,所以,从参训人员哪里得到更多的意见反馈,尤其是书面形式的,就很重要了。可以将反应评估表的填写安排成培训项目的一个组成部分,从而从所有参训人员那里得到相应的意见反馈。
第四、得到真诚的回答。参训人员在参加公司外部的培训项目时通常都会坦率表达自己意见,因为这样做几乎不会给他们带来什么负面影响。而公司内部的培训项目情况则正好相反,参训人员会担心提出意见之后对自己产生不利的影响而不愿意表达真实的想法。所以,反应评估表尽量采取匿名填写才有可能得到比较真诚的意见。
第五、确定参训人员认可的评估标准。在充分考虑了资金预算、培训设施和可用师资等相关情况下,根据对培训项目预期情况的实绩分析,建立一套参训人员能够接受的培训绩效评估标准。
第六、根据评估标准衡量培训反应,并采取相应措施。一旦确定了符合实际情况的评估标准,就应该根据评估标准对照实际结果对培训项目的各个方面进行评估。如果没有达到预期标准,可以对培训负责人、培训设施条件、培训主题、培训师深圳评估标准等方面做出调整。
八:在学习层评估上避免给参训人员带来压力。
有一个案例:某公司在给员工开展英语培训,除了周末的集中授课外,每天还要求员工自己抽出1小时自学,1个月后进行考核,不合格的就被辞退。可是员工们普遍基础很差,压力很大,为了保证自己不被辞退,在上班时间也偷学英语,导致公司工作严重滞后。
无论评估的内容是啥,适当的压力有助于参训人员更积极地学习、培训师更好地讲课,但是压力过大就会使培训适得其反。
第一、通过笔试对参训人员学习的知识技能进行测试。培训前后测试总分对比是衡量知识增长或态度转变;将参训人员对测试题中各个题目的答案进行对比,找到培训对参训人员的作用和影响。但是在学习新知识的时候不要进行培训前测试。对于学习态度方面的评估,可以通过态度调查表的方法将希望参训人员在培训后具备的态度包括在里面,然后把参训人员培训前后的调查结果进行对比,则可以看出参训人员在态度上的变化。
第二、通过绩效测评衡量参训人员学习的技能。在培训前先通过参训人员的实际操作考察期培训前的水平,在培训后根据其同样的操作表现来评估学习的结果。
第三、让全部参训人员参加测试。
第四、采取恰当的措施。如果培训没有取得相应的成功,那么就应该把视野放到培训内容或者培训目标上,了解在哪些方面做的不好,而不是质疑参训人员在哪方面出现了问题如果认识到选择的培训内容或培训目标与理想的存在差距,就应该找出对策。
九:在行为评估上避免占用过多精力。
有些公司在行为评估上花费的时间和精力很多很长,采取360°的方式来评价行为层次,既要填写问卷还要应付访谈,甚至有些公司为此还出现过吵架争执现象,搞到最后,大家就培训就更反感了。对于这种,情况,HR应该从评估实施的时间、方法、评估前的沟通及评估后的反馈上多方面综合考虑设计评估流程。
第一、留出充足的时间,促使行为转变。除非参训人员有机会改变自己的行为,否则他们很难促成自己的行为转变。如果参训人员能够将培训中掌握的知识应用到实际工作中,应该留出充足的时间,以促使其行为改变。不然,他们会说:我都没有机会和时间来转变,你就来评估,这不是扯淡的嘛!
第二、如果有可能,在培训项目前后都要进行评估。在计划培训项目时,首先确定员工应该采取哪些行为以取得最高的工作效率是最重要的。在培训项目开始前,应该对参训人员的行为进行评估。在培训结束后,如果需要对参训人员的学习情况进行评估,就可以对其培训后的行为转变做出衡量,了解培训项目讲授的知识技能或态度让参训人员在行为方面发生了怎样变化。通过参训人员培训前后行为变化的对比,就可以确定参训人员在行为方面发生了哪些变化。
第三、对了解参训人员行为的人进行调查或访谈。评估应该对参训人员及其直接主管和下属人员,以及对参训人员行为有直接了解的其他人员进行调查或访谈。这里面,只需要抽取一小部分人作为样本,没有必要全部调查访谈。这时候,可以为这部分人准备一点礼物进行激励激励。
第四、对所有参训人员进行评估或者选择部分人员作为调查样板进行评估。
第五、在适当的时间范围内进行多次评估。因为行为的转变需要时间、需要机会等等。
第六、比较评估成本和评估收益,看看行为转变所用的成本与评估取得的收益。
十:制定评估标准避免缺陷。
曾记得本人参加电脑五笔输入法培训的时候,单位没有说要掌握ExcelWord的应用技能,结果培训回来后,对我们的考核标准全部是怎样使用ExcelWord,搞得哭笑不得。这个事实说明,评估标准一定要在培训前确定,避免缺陷和争议。
制定评估标准应该充分考虑:
第一、标准相关度。也就是培训成功和培训目标所强调的知识、能力和技能之间的相关性。
第二、信度。就是测试结果在一段时间内的一致性程度。信度高的测试就是参训人员对测试题目的理解和解答在经过一段时间后并没有发生改变,就可以使参训人员相信,相对于培训前后测试分数上的提高是由于在培训项目中进行了学习,而不是因为测试特点或测试环境等其他因素。
第三、区分度。就是不同的参训人员取得的成功真正反应其绩效的差别的程度。
第四、可行性。就是收集培训成果的测量结果的难易程度。
正确的培训评估是一个复杂过程,这是因为培训的效果具有多因素、多变量、界限模糊等原因,科学地进行定量分析是比较困难,坚持评估标准的科学性就是想努力做到合理分解评估项目与要素,合理确定各项评估指标的权重,合理确定各项评估要素的分值。
十一:避免出现信度较低的测试结果。
测试结果是否能真实地反应培训效果还取决于测试的信度。以前,本人在建设单位的时候,对员工的安全标准掌握程度进行测试,结果是普遍不合格,上报之后引起领导高度重视,责令部门长进行安全标准知识的培训。可是部门领导为了优化培训效果,将本次培训化作自己的功劳,就选择了一个业绩最好的单位,亲自监督,观察他们的行为。培训结束后过了一段时间,公司对参训人员进行一次测验,结果是部门长监督的单位效果非常明星,所有员工全部合格,然而其他单位的成绩则参差不齐。
这个案例,虽然对员工参加培训前后各进行一次测验,但是测试结果的信度却不高。信度高的测试是指参训人员对测试题目的理解和解答在经过一段时间后并没有发生改变。这就可以使参训人员相信,相对于培训前、培训后测试分数上的提高是由于在培训项目中进行了学习,而不是因为测试特点(比如第二遍看题目时更容易理解)或者测试环境(比如参训人员之所以能在培训后的测试中表现得更好,是由于教室更舒服更安静)等其他因素。上面的这个案例,前后测试环境相同,但是可能出现了霍桑效应:在评估中,员工仅仅因为受到关注表现高绩效的现象。
由于参训人员培训前后的行为和态度的变化,不仅仅取决于培训,还取决于组织环境的变化、培训期间个体的成熟程度、参训人员对培训的认知等多种因素的复合作用,则需要设法从诸多变量中区分培训的影响。参考的方法有:
1.前测和后测。提高信度的一个方法就是首先建立培训成果的基准线或进行培训前测验,培训后在相同的环境进行有关成果的另外一次测验,能够说明参训人员由于参加培训而改变的程度。如果后测的环境显然优于前测的环境,则测试结果的信度必然会低。
2.利用对照组,避免霍桑效应。对照组是指不参加培训项目的一组员工,但是他们会收到相同的对待,前测和后测使用的仪器相同,而且他们具有与参训人员相似的条件,比如性别、年龄、文化、在职年限、技能水平等,因此他们在公司中收到的关注度差别不大。在评估中,运用对照组就可以排除培训之外的因素对成果衡量尺度的影响。
在上面的案例中,对参训组和对照组在培训前、培训后分别进行安全测验,并且给予对照组和参训组同样的领导关注度,如果参训人员的安全行为水平较培训前有所提高,而对照组在培训前后没有什么变化或者变化程度明显弱于参训组,那么合理的结论就是:培训导致了员工的行为发生了好的变化,而不是参训组因为受到领导的关注导致了这一变化。
增加一个对照组,会增加培训成本,而且还需要考虑哪些员工纳入参训组和对照组,一个办法就是在明确参训人员之后,对他们的特点进行描述,确保对照组中的成员有类似的特征;另外一个办法就是采用随机抽样法,由于一般不太容易衡量所有能够影响培训成果尺度的个性特征,只能通过随机抽样,确保这些特征均匀分布在参训组和对照组。
培训效果评估的方法有很多,对培训效果的要求各不相同。培训师必须有效地运用评估方法,既要成功地进行评估,又不能浪费资源。决定评估前,要考虑两点:一是可以使用的方法、工具;二是可以用来评估的资源。当这两条都满足的时候,就可以有效地进行评估。
但是在现实中,由于一些客观条件的影响或者限制,使得培训方法不能发挥全部的作用,这样会使评估不完整;评估结果带有主观性;评估结果很难理解。但是,如果前后一致地进行了评估,尽管评估不完整,在某种程度上,也对下一步的参训人员的工作和下一次的培训有所帮助的。
十二:如何避免单一的培训效果信息收集渠道?
在某次公司培训评估会议上,某领导首先开口这样说:“这次培训,我看到我们的员工都很积极,他们都说收获很多,因此,我个人认为这次培训是非常成功的。”接下来,基本上所有的与会者都按照领导的这个基调进行培训效果发表自己的意见,没有一个发表与领导基调不同意见的意见或者建议。最后,领导就决定:“大家的讲话很有代表性,基本上代表了本次培训的心声,因此,这次的培训效果评估,培训师也好、组织者也好,就按照这次会议精神来进行。”
这个案例中,领导只考虑了单一(自己)方面的培训感受,而且是通过正式会议的形式进行信息数据收集,信息收集渠道就不全面。首先,至少要考虑到生产、计划、参训人员、管理部门、主管领导以及培训师对培训的感受,而不能一开会就定基调。这就导致但愿信息主体的信息采集必然不准确。其次,领导的感受固然是信息收集过程中的一个环节,但是培训是受到多方面因素决定的,对培训效果的评估也不能单从某一方面入手,这是一个整体,少了那个环节都会影响最终的结果分析。因此,全面的信息收集是做好培训评估的保证。
1.主观信息的采集。在确定信息采集主体后,结合调查问卷等信息采集方式,正面采集个体对培训的反馈。在培训的过程中贯穿非正式的信息调查采集,如小范围的座谈、就餐时的交流等等。非正式渠道的信息采集要以确认正式渠道所采集的信息准确度为目的,注意形式的多样化和气氛的控制。
2.客观信息的采集。客观信息的采集包括一切可用数据衡量的信息,如员工知识水平的提升、操作水平的改变等,在正式采集信息的前后可进行多次非正式的测试或评分模拟,以确认在正式采集时信息的准确性,排除偶然因素的干扰。但不能忽视时间作用对正式采集信息结果的影响,应在不同时间间隔时期进行多重检测,确定信息的稳定性。
3.注意信息之间的对比分析。在正式采集各主体的信息后,应对同一问题的不同主体之间的信息进行对比分析,这也是非正式信息采集的一种方式。比如,同一问题不同主体之间的信息偏差过大,则存在进一步确认的必要,找到分歧所在,是信息技术处理问题还是主体理解程度问题等,从而保证信息的准确性。
信息的准确性是保证培训评估结果准确性的基础。这点我们要牢记。只有多样的信息采集方式、全面的信息采集多渠道、客观又合理的信息收集技术等方面能正常地发挥作用并有机地结合在一起,才能真正确保信息准确性。
还有一些问题,没有来得及写出,由于本人最近出差、会议等事情较多,对于各位坛友提出的有关培训效果评估其他问题,争取在本帖之二里面写完。感谢理解!常诚写于杭州西湖STARBUCKS COFFEE。
本帖最后由 常诚 于 2011-7-28 19:00 编辑

点评

超级版主  文章很强,但是想问最喜欢星巴克的那一口味的咖啡?  发表于 2011-7-28 19:35  回复
已有 4 人评分威望 金钱 贡献 收起 理由
天涯禅师 + 10 + 26 很好!
qangel + 20 + 5 谢谢分享
超级版主 + 20 + 30 + 20 感谢你的分享
芋儿 + 10 + 20 内容丰富

总评分: 威望 + 60  金钱 + 81  贡献 + 20   查看全部评分

请大家参与话题分享,感谢感谢!

87

主题

20

听众

5万

积分

版主

Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30

签到天数: 176 天

[LV.7]常住居民III

注册时间
2004-5-15
最后登录
2016-7-28
积分
54650
精华
2
主题
87
帖子
3079

最佳辩手 春节活动勋章

沙发
发表于 2011-7-28 19:30:32 |只看该作者
要好好学习一下,谢谢常诚
回复

使用道具 举报

20

主题

9

听众

1万

积分

同进士出身

Rank: 22Rank: 22Rank: 22Rank: 22

签到天数: 167 天

[LV.7]常住居民III

注册时间
2011-4-24
最后登录
2019-3-25
积分
17369
精华
2
主题
20
帖子
494

2011年人气会员勋章

板凳
发表于 2011-7-28 21:34:18 |只看该作者
有点深奥……

点评

东方明月1  富春山居图 bbs.zzoo.cc  发表于 2013-3-6 15:25  回复
萌芽微电影  尚艾诗www.hz3s.com微电影www.mengyav.com  发表于 2013-9-9 15:55  回复
笑的背后是哭泣
回复

使用道具 举报

3

主题

4

听众

4708

积分

解元

Rank: 12Rank: 12Rank: 12

签到天数: 52 天

[LV.5]常住居民I

注册时间
2003-7-11
最后登录
2013-4-16
积分
4708
精华
0
主题
3
帖子
194
地板
发表于 2011-7-28 22:14:24 |只看该作者
比较系统理论,偶好像没有耐心仔细看一遍。鄙视自己一下。
正式开始介入培训体系的建设,哪位前辈有经验,多指导!也欢迎推荐高手到偶们这里工作!帅哥美女一大堆!
回复

使用道具 举报

245

主题

66

听众

3万

积分

荣誉版主

Rank: 35Rank: 35Rank: 35Rank: 35Rank: 35

签到天数: 347 天

[LV.8]以坛为家I

注册时间
2005-11-1
最后登录
2019-10-18
积分
36918
精华
15
主题
245
帖子
5932

原创先锋 校招君勋章 2012中人社区群英谱勋章 小天使勋章 2011年人气版主勋章 校招达人勋章 妙笔生花勋章

5
发表于 2011-7-28 22:18:29 |只看该作者
好多好专业啊
回复

使用道具 举报

273

主题

130

听众

20万

积分

超级版主

Rank: 50Rank: 50Rank: 50Rank: 50Rank: 50

签到天数: 746 天

[LV.9]以坛为家II

注册时间
2010-9-6
最后登录
2022-8-3
积分
201155
精华
51
主题
273
帖子
6791

中人守护者 2012中人社区群英谱勋章 小天使勋章 春节活动勋章 最佳辩手 月度伯乐勋章 案例达人 原创先锋 精华大师 我考证 乐分享勋章 2011年人气版主勋章 妙笔生花勋章 校招达人勋章

6
发表于 2011-7-28 22:27:15 |只看该作者
好文章,顶!!!!
回复

使用道具 举报

112

主题

99

听众

100万

积分

版主

小小猪的爸爸

Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30Rank: 30

签到天数: 607 天

[LV.9]以坛为家II

注册时间
2005-4-4
最后登录
2016-10-11
积分
1005370
精华
8
主题
112
帖子
4235

2012中人社区群英谱勋章 2011年人气版主勋章 妙笔生花勋章 晒图达人勋章 办公室点名活动小金人 中人旗帜勋章

7
发表于 2011-7-29 07:17:35 |只看该作者
要向常诚好好学习!!
不争,不染,不逆,不持,不缚 快乐就在智者心中
回复

使用道具 举报

9

主题

4

听众

4198

积分

解元

Rank: 12Rank: 12Rank: 12

签到天数: 183 天

[LV.7]常住居民III

注册时间
2010-5-6
最后登录
2016-6-24
积分
4198
精华
0
主题
9
帖子
335
8
发表于 2011-7-29 07:58:40 |只看该作者
好文章,要学习!
时间都去哪啦?
回复

使用道具 举报

2

主题

6

听众

2025

积分

举人

Rank: 8Rank: 8

签到天数: 26 天

[LV.4]偶尔看看III

注册时间
2011-6-1
最后登录
2011-12-12
积分
2025
精华
0
主题
2
帖子
99
9
发表于 2011-7-29 08:08:19 |只看该作者
谢谢,培训很陌生,正好学习了
回复

使用道具 举报

1

主题

6

听众

4407

积分

解元

Rank: 12Rank: 12Rank: 12

签到天数: 66 天

[LV.6]常住居民II

注册时间
2011-3-3
最后登录
2014-9-6
积分
4407
精华
0
主题
1
帖子
108
10
发表于 2011-7-29 08:17:39 |只看该作者
看完前辈的帖子后,有股想撞墙的冲动~~

点评

常诚  千万别撞墙,撞墙就是我的错!  发表于 2011-8-2 20:53  回复
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册