在线咨询
电话咨询
微信咨询
TOP

你们家的管理情景判断测验测得准吗?

作者:益才    发布时间:2023-05-26

关于这个话题,从一个客户说起 

张经理是某上市集团公司人才发展高级经理。根据集团中长期发展战略规划,必须大力提升干部的管理能力,但是下属子公司很多管理干部是由于业务出色晋升到管理岗位,他们大多有着身先士卒,亲力亲为的工作风格。集团总部认为子公司的基层管理干部急需角色转变才能适应公司战略发展的需要。因此,集团今年计划分三批次开展干部管理能力提升项目。张经理调研了很多第三方培训咨询公司,但调研的结果让张经理很困惑,第三方机构很多,不知如何甄选,并且还担心花了钱没有培训效果。
张经理把公司的需求与顾虑对接到益才顾问,益才顾问建议用情景判断测验做一次管理能力诊断评估,通过测评发现干部的能力短板,设计有针对性的能力培养方案。

图片

图片
01什么是情境判断测验?

情境判断测验是人才测评的一种方法,属于模拟测验,是评价中心家族的一个重要成员。情景判断测验通过模拟一些工作中实际发生或可能发生的情景,要求受测者针对情景中的问题,对可能的几种反应做出判断。因为它贴近工作实际场景,具有较强的针对性和较低的使用成本,兼有传统纸笔测验和情境技术的优点,因此在人才测评实践中广受欢迎。以下是一个情境判断测验例子:
假设你在一家物流公司担任了三年的部门经理,部门有20多人,公司上下对你第一年的工作业绩很认可。部门有两个副经理,一个能力很强,一个表现一般,他们不能为你提供任何实际的帮助。尽管你表现不错,但你的上级领导并不认为你比公司的其他几名级别相当的部门经理能力更强。你很想快速地被提拔。以下列出了你在之后的两个月中考虑要做的事情。请根据你的目标,评估每个事项的优先级。
(1)找机会除去部门中的“朽木”,如表现一般的助理及部门里面另外两三个成绩平平的人。
(2)想办法使你的上级注意到你的工作成就。
(3)对超出你直接领导的部门范围内的事情,提出一个工作建议报告,用以引起上司的注意。
(4)在做决定之前,更加注意考虑上司的意见。
(5)让上司对你所做的重要决定进行评价。
(6)调整工作时间以提高效率。
图片
02 情境判断测验考察什么?

情景判断测验一般用于考察复杂的、综合的、与实际工作相关的“能力”,在某些场合也叫“实践智力”。斯滕伯格将实践智力定义为一种内隐的程序性知识,而这种内隐知识可以作为实践智力的测量指标。采用情境判断测验,可以模拟真实世界的复杂情境,在时间压力下,要求个体提供相应的反应,测量个体间的关系、问题解决技巧和行为意愿等(Weekley&Jones,1999),以此可以更好地捕捉那些来自实践的行为,尤其是以经验为基础的程序性行为。
情境判断测验的理论假设是行为一致性,被测者在处理与工作中类似问题时的行为,可很好地预测他在工作中的实际行为;所以向被测者呈现与工作类似的情景,对他们的行为进行评价,能够有效的预测被测者在工作中的表现。


图片
03 情境判断测验有什么优势?

问题解决的情景性在情境判断测验中,每个问题情境都设置了有限的几项可能出现的行为反应,应试者只需要根据要求对情境的行为反应做出选择或评价,不需要陈述或展示其真实行为。以实际工作情景中非常可能发生的关键事件为情景基础,在此基础上进行加工编制。比如,要考察管理者的沟通协调能力,在设定问题情景时,就是从管理者经常遇到的对上、下、左右沟通过程中的难题中抽取典型的情景,看管理者在这种近似真实的情况下是如何沟通的。具体地讲就是给受测者设置“当下级越级汇报时或者当同级其他部门不支持你的工作时,你会怎么办?”这样的问题情境。受测者作答这样高仿真度的测验时,会有一种身临其境的感觉,从而激发他们的答题热情。

评价客观公正情景判断测验的所有题目均是客观题,客观题的设计能够提高评分的效率,并且可避免因为评价者评分尺度的不统一而造成的评价偏差。使用情境判断测验考察管理者的管理能力能够满足客观、公正的要求,不会因为评分者的不同或题目难度的差异而给受测者留下不公平的印象。
操作敏捷高效情境判断测验的操作实施简便高效,能够大规模施测。和评价中心的其他测评方式相比,情景判断测验的施测成本较低,并且省时省力,方便快捷。测验结果是依据事先确定的各个选项的赋分规则进行评分得来的,不需要考官对应试者的行为反应进行评价。还能够帮助企业领导勾画出管理者管理能力的轮廓图,为企业在人员晋升、岗位安置、班子搭配和培训课程开发等方面提供决策依据。情景判断测验是一种纸笔测验,
直接比较群体差异。企业领导都关心自己企业管理者的管理能力与同行业其他单位管理者的管理能力相比处于什么样的水平。益才咨询开发的情境测验已有近百家企业累积上万管理干部的情境测验常模数据库。如果企业领导想知道管理干部的管理水平如何,直接把干部的得分与常模分数做比较就可以了。而评价中心的其他技术,如无领导小组讨论、角色扮演、文件筐等由于其评价者的差异、测评分组的差异等导致不同批次的测评成绩不能直接比较,也就不能满足企业领导的上述要求。
图片
04 情境判断测验如何开发?

确定能力指标在开发情境判断测验首先要确定能力指标。例如,王重鸣提出的高管的能力要素包括协调监控、战略决策、激励指挥、开拓创新等能力。时勘提出高管必须具备影响力、组织承诺、信息寻求、团体领导、人际洞察力、发展他人、成就欲等。
问题情境的设置在情境判断测验中,问题情境要解决的问题通常是工作、生活与实践中的矛盾冲突,可以通过不同途径采用不同措施来解决,其结果也可以是多种多样的。重点提供具体情境中的人员角色、人际关系与组织文化、价值取向与利益关系等情境。这种情境包含的矛盾具有普遍性、典型性和现实性,与工作绩效直接相关并具有较强的鉴别能力。就管理干部说,为确保情境判断测验的有效性,情境必须针对核心能力要素来设置,主要是处理人与人、个人与组织、组织与组织等关系。
收集和筛选问题解决的行为反应。情境判断测验需要收集和筛选问题解决的多个行为反应,只有将问题情境与行为反应共同呈现,才能共同构成测验的问题空间。通常会邀请在岗员工,请其针对情境中的问题,写出处理问题的理想解决方法,也可以写出较好的和较差的两种解决方法,增加可能的行为反应选项。益才咨询在过往项目实践中,为了提高行为反应选项的区分度,直接选择工作绩效较好的和工作绩效较差的员工来填写在工作中可能的遇到的问题的解决方法。问题解决方法应满足以下要求:
(1)针对性。行为反应都是解决情境问题可能出现的一个方法。
(2)区分度和鉴别力。如果高水平和低水平的应试者在某一行为反应选项上的作答表现完全一样,那么这样的行为反应选项就是没有区分度和鉴别力的无效选项,应该剔除。
(3)数量合适并按强度大小排序。一个情境判断测验题一般应有4~6个行为反应选项,它们可以按解决问题的有效性或愿意采用的程度从高到低进行排列。
确定测验的指导语。情境判断测验针对给定的情境,对与情境有关的行为反应选项做出判断、评价和选择。判断时,要给出具体的指导语,指导语是用来说明应试者如何选择行为反应选项。

确定记分方法。
(1)迫选法。选对得“1分”,选错得“0分”;或者选对一项得“1分”,选对两项得“2分”或将最有效(最愿意)项选为最无效(最不愿)项得“-1分”,反之也得“-1分”;或者选项最合适的5分,比较合适的4分,基本合适的3分,不太合适的1分,完全不合适的0分。
(2)李克特量表法。在等级量表上对每个行为反应选项评分,再计算出应试者的评分与专家设定值的离差,离差小者为优,或者只考查最有效(最愿意)项上的离差;也可不求离差而求相关系数值。
(3)排序法。按专家排序的标准给每个行为反应选项赋予一定的分值,然后把应试者的选择按这个标准进行数量化。

图片


图片
05 情境判断测验测得准不准?

评判一个测评工具是否有效,最关键的是看该工具是否能预测工作绩效,具有高的效标关联效度。自从情境判断测验技术开始应用,其效标关联效度就广为关注,大量的实证研究检验已证明情境判断测验具有良好的预测效度。Stevens 和 Campion( 1999 ) 发现情境判断测验与工作绩效相关较高发现情境判断测验与工作绩效平均相关为0.34。
益才基于情境测验在上百家企业的实践应用,对多家企业的效标进行验证,实践表明情境测验与工作绩效平均关为近0.45,这说明情境判断测验具有很好的效标关联效度,可以较好地预测个体现在和将来的工作绩效。