查看: 3460|回复: 7

基于心理学和统计学谈谈培训评估问卷的设计

11 主题	6 听众	434 积分

书生

Rank: 3 Rank: 3 Rank: 3

该用户从未签到

注册时间: 2008-5-14
最后登录: 2021-9-2
积分: 434
精华: 0
主题: 11
帖子: 47

电梯直达

楼主

发表于 2009-3-26 11:27:00 |只看该作者 |倒序浏览

这个标题提得太大，其实只是一个良好的愿望罢了，心理学和统计学都是我想学却没学好的两门课，所以这里把这话题提出来，是想听听真正懂行人的意见。
我们公司比较倚赖办公自动化系统。比如培训评估，学员进入链接，给培训打分。年底了，根据分数给讲师发课酬（标准酬劳*实际分数/90），并根据得分排名评出优秀讲师。
以前我们的评估问卷是十道题，包含了方方面面，如课件制作、课程实用性、讲师授课技巧等（当然问题多有重复，且竟然包含了对培训组织的评估，这些明显该改的不多讨论）。每道题是十分制。最终统计出百分制的。
现在想改动。面临了两大难题：

一、问题及其权重的设计。
培训的反应层评估应包含哪些方面？讲师、组织、环境等等。好吧，那对讲师的评估应包含哪几个维度？而这几个维度各自的重要性是多少？首先问题设计应包括所有维度，如果每道问题代表一个维度，问题的分值是否因维度重要性高低而不同？
很可惜我还没有在网上找到哪份很权威的论述，告诉我讲师的评估就应该是ABCDE这五大维度，这五个维度各自权重是20%、30%、10%、15%、25%。那我就很容易设计了，设计五道题，设置其后的权重。

二、问题数目及每道问题的分值
如果说第一个问题是比较纯粹的培训领域的专业问题，那第二个就要求教心理学和统计学了。
我想把原有的10个问题改为5个，这是为了减轻学员负担，避免他们草草敷衍了事。但又担心，是否问题越少，反应出的不同课程评估差异也越小？如果把学员对一堂课的评估看作一个分散式的统计分布的话，是否问题数目越多，其分值越接近学员心目中最真实的感受和评价？（就好像概率学里的那种枪眼密布的枪靶）
当然，问题数目跟我的第一个问题相关。
其次的问题是每道题分值的设置。我想把原有的十分制改为五分制，也是为了学员方便。但是又有新的担心：是否五分制表达出学员的感受更为粗糙而笼统？比如某学员觉得这堂课一般般、比较勉强，10分制的时候他会打个5分，5分制的时候他就点最中间的3分，两者统计出来还是存在一定差异的。（我们可以参考一下豆瓣和IMDB，豆瓣是5分制，好像搞得跟10分制的IMDB没什么区别，但要知道，那是建立在大量数目的基础上）。

不知道我说的大家有没有听明白，希望能有高人出来回答一下我的问题。其实估计市场策划领域也会有类似问题。