基于项目反应理论的职业能力测评研究

时间:2022-07-23 09:07:07

基于项目反应理论的职业能力测评研究

【摘要】 职能能力测评在为事择人的职业选拔和安置、为人择事的职业指导以及执照和资格的授予等人力资源实践中被广泛采用。传统职业能力测评工具往往注重定性测量,随着测量理论,特别是项目反应理论的应用和发展,职业能力的定量测量成为现实。本文着重介绍了项目反应理论的内容实质以及将其引入职业能力测评的合适性。

【关键词】 项目反应理论职业能力测评

一、职业能力与职业能力测评

职业能力是指对职业获取或发展有影响的能力,是人们从事某种职业多种能力的综合。从广义上说,职业能力有三层含义:一是为了胜任一种具体职业而必须要具备的能力,表现为任职资格。每个职业都是需要一定和特殊的能力才能胜任,如教师要有专业授课能力,总经理要有协调管理能力,这个任职能力可以在每个职业(岗位)的任职资格中了解到;二是指在入职后表现出的职业素质。职业素质是人的道德、态度、意志等层面的内在素质,还包括在职场上的工作思维、方式,职场规则、常识等;三是开始职业生涯之后具备的职业生涯管理能力。职业生涯管理能力表现为内省能力、自我管理能力、职业选择与抉择能力、获取与分析信息、整合与利用资源、了解与分析职业环境、处理个人生命周期与职业发展周期冲突的能力、规划职业与转换职业的能力等,是对自己职业生涯发展负责的表现。

职业能力测评是指运用合适测量工具对被试者是否具有某种职业能力及其拥有程度的评定活动,其目的是为了达到“人―职业―组织”的最佳匹配并最终实现个人职业发展和组织绩效水平的共同进步。在职业能力测评过程中,测量主要是依据一定的心理学理论,使用一定的操作程序,对人的能力和行为确定出一种数量化的值,其在职业决策中的应用主要体现在为事择人的职业选拔和安置、为人择事的职业指导以及执照和资格的授予等三个方面,这其中融汇了现代心理学、测量学、统计学等学科的许多理论和知识。目前,在人力资源实践中,职业能力测评工具或方法包括能力测评量表、面试和笔试、情景模拟测评、评价中心技术等。随着测量理论的发展和应用,特别是经典测量理论、概化理论和项目反应理论三大理论模型的出现,职业能力测评手段也愈加丰富,职业能力测评的科学性和公正性也不断增强。其中,由于项目反应理论自身理论的完备性和可操作性等优势特点,成为职业能力定量测评的有力工具。

二、项目反应理论的内容实质

项目反应理论(Item Response Theory,IRT)也称为题目反应理论或潜在特质理论。项目反应理论假设被测试者有一种“潜在特质”,潜在特质是在观察分析测验反应基础上提出的一种统计构想。在测验中,潜在特质一般是指潜在的能力,并经常用测验总分作为这种潜力的估算。项目反应理论认为被试者在测验项目上的反应和成绩与他们的潜在特质有特殊的关系。因此,IRT理论上的基本思路是确定被试者的心理特质值和他们对于项目的反应之间的关系,这种关系的数学形式就是“项目反应模型”。

IRT的核心就是数学模型的建立以及对模型中各个参数的估计。IRT有三个基本假设:

第一,潜在特质空间的单维性假设。潜在特质空间指对于某一特殊行为的发展起作用的所有潜在特质的集合。大多数项目反应模型都假设完全潜在空间是单维的。

第二,局部独立性假设。被测试者对一个测验项目的反应不受他们对其他测验项目反应情况的影响。

第三,项目特征曲线假设(ICC)。该曲线反映的是被测试者对某一测验项目的正确反应概率同该项目所对应的能力水平或特质水平之间的函数关系。

不同的项目特征曲线假设对应的是不同的项目反应模型。目前应用最广泛的项目反应模型是以伯恩鲍姆提出的逻辑斯蒂模型(Logistic)为代表为二级评分的单维非线性模型。伯恩鲍姆假定的项目特征曲线如图1所示。

项目特征曲线是描述各种能力水平或特质水平的被测试者(用θ表示)对某一测试项目的正确反应的概率(用P(θ)表示)。具有某种能力水平或特质水平的被测试者对某一项目的正确反应概率只受该项目的自身质量影响。

在一般情况下,被测试者的能力水平或特质水平可被认为是连续变化的,因此,反映不同能力水平或特质水平的被测试者的回答正确概率的连线就一定是一条平滑的曲线。由于能力或特质越高的被测试者回答正确的概率越大,所以这条曲线应是一条单调递函数曲线。经分析研究发现,被测试者的回答正确概率与其能力水平或特质水平之间的关系是非线性的,也就是说,当能力水平或特质水平θ大或小到一定程度以后,回答正确概率P(θ)随之变化的速度显著变小,研究还发现,这条曲线的形状是一条以其拐点为中心的S型曲线。

研究者通常采用项目难度、项目区分度和猜测参数三个指标来描述某一测验项目的质量。从图1中可以看出,项目特性曲线最下部的渐近线离坐标轴上的零点有一定距离,这说明由于有猜测因素的存在,即使能力水平或特质水平很低的被测试者也有可能回答正确。该项目的猜测参数(用c表示)表示凭猜测回答正确的概率。由于项目特征曲线是一条以拐点为中心的S型曲线,因此其拐点在纵坐标轴上的投影恰好落在c与1的中心上,即拐点的纵坐标为(c+1)/2。这表明能力水平或特质水平为b(拐点在横坐标轴上的投影)的被测试者回答该项目正确与回答错误的概率(不计猜测因素影响)正好彼此相等,所以b被定义为项目的难度参数。项目特征曲线拐点处的斜率表现的是曲线的陡峭程度,这与项目区分被测试者水平的能力有关。曲线越陡峭,回答正确概率P(?兹)对能力水平或特质水平的变化就越敏感,即项目区分被测试者水平的能力就越强。因此,这条曲线拐点处的斜率被称为项目区分度参数(用a表示)。用来描述项目反应模型的数学函数被称为项目反应函数。Logistic模型函数表达式为:

根据模型所绘制的曲线也叫做项目特征曲线(item characteristic curve,ICC)。其意义在于描述了“成功解答某一特定考试项目的可能性”和“被测试者能力”(在函数中以?兹表示)之间的关系。在以上Logistic模型中:D=1.702为一常数;?兹为被测试者的能力值;P(?兹)表示能力为?兹的被测试者答对此项目的概率;a为项目的区分度,即特征曲线的斜率,它的值越大说明项目对被测试者能力的区分程度越高;b表示项目的难度,即特征曲线在横坐标上的投影;c表示项目的猜测系数,即特征曲线的截距,c值越大,说明不论被测试者的能力高低,都容易猜对本道项目。

三、项目反应理论引入的合适性

传统职业能力测评在进行测评之前,问卷项目或测量的题型、题量及题目难度就已经确定,但是在现实测评过程中,受试者的能力有高低,如果测试难度与受试者的实际能力水平相差过大,就可能会出现系统性偏差,难以真正测出受试者实际的能力水平,导致人力资源决策的失误。项目反应理论则克服了传统职业能力测评工具的弊端,具有更好的信度与效度。主要表现在以下几个方面。

第一,项目反应理论深入能力测评的微观领域,将被测试者职业能力水平与被测试者在项目上的行为关联起来并且将其参数化和模型化,通过统计调整控制误差。如果模型成立并且项目参数已知,则项目反应模型在测评中为项目性质调整数据,可生成独立于测评项目性质的能力或特质水平测量,这是依据项目反应理论建立项目反应模型的最大优点。简单来说就是被试者能力测评不依赖于测评项目的特殊选择。

第二,项目反应模型参数的估计独立于被试样本。项目特征曲线是被测试者回答正确的概率对其潜在特质水平的回归,而回归曲线并不依赖于回归变量自身的频数分布。所以,在估计项目特征曲线的各种参数时,由于回归曲线的形状、位置都不依赖于被试的分布,所以项目特征曲线的参数,包括难度、区分度和猜测参数也都是不变的。

第三,项目反应理论中的能力参数与项目难度参数的匹配性,也就是说项目难度参数与能力参数是定义在同一个量表上的。这样,对一个能力参数已知的被测试者,配给一个项目参数已知的试题,研究者就可以通过模型预测被试者正确回答的概率。如果估计出被测试者的能力水平,研究者可以在题库中选出难度与其能力相当的项目进行新一轮的测试,使得能力测评更为精确,这奠定了自适应测评的基础。

第四,项目反应理论通过项目反应模型测得的被测试者能力水平,可以精确估计其测量误差。测量误差的估计因人而异,项目反应理论可以根据每个受试者提出其能力水平的测量误差,而不是像经典测量理论那样,以一个笼统的标准误差来代表测量误差,所以能够很精确的提供不同能力水平被测试者的能力估计值的测量误差。

四、结语

项目反应理论主要是针对个体能力和知识技能进行测评,这与职业能力测评和人员选拔中依据能力水平和知识技能的原则是相一致的。而且,项目反应理论在个体职业兴趣、职业性向测评中也能被广泛采用。项目反应理论应用过程中,虽然对使用者的素质和客观条件有较高的要求,但是IRT理论数理逻辑严密,测量精度高,项目反应理论在人力资源领域,特别是在人员测评领域具有广阔的应用前景。

【参考文献】

[1] 詹沐清、卢荣华:论项目反应理论模型[J].科技信息,2009(15).

[2] 苏永华:现代人才测评理论与方法研究[D].华东师范大学,2000.

[3] 施德宝、孙步宽:基于项目反应理论的人才测评软件优势与开发[J].人力资源管理,2010(12).

上一篇:我国制造业上市公司财务危机预警研究 下一篇:目标成本管理在施工企业中的应用分析