效度概化的理论研究述评

效度概化（validity generalization：VG）是心理测量理论和元分析的结合体,也是元分析在人事测评领域的重要应用。它深刻地挑战了人事测评效度的情景特异论,在工业与组织心理学的发展历程当中具有里程碑意义。该文系统地介绍了效度概化理论的逻辑思路、主要模型、关键理论语与应用,以及研究趋势。     

评价中心结构效度的多元概化理论分析研究

评价中心技术是现代人事测评的一种主要形式,主要通过多种模拟任务来测评高级管理人才。然而,少有研究能证明它具有理想的结构效度。该研究运用多质多法分析了某金融企业一次真实的评价中心测评项目,发现测评的结构效度并不理想。接着,通过多元概化理论的分析,探讨了结构效度不理想的原因,并指出了评价中心任务与所测维度之间的关系,以及对各维度的测量信度。最后,根据分析结果,探讨了优化评价中心结构效度和提升整体测量信度的途径。     

人事测评中的概化理论应用

概化理论是现代心理与教育测量理论之一,可应用在各种人事测评中,如表现性评价、多源评估、心理测验、结构化面试、水平测试、工作分析、评价中心等.与经典测量理论相比,概化理论应用于人事测评,表现出较强的优势,能够同时考察多种因素、确定多个维度权重等,其应用对象主要包括两大类,即企业和机构.概化理论应用于人事测评,存在应用领域、样本数据、测评效度和微观分析等问题.     

履历数据测评的效度分析

履历数据是人员测评的重要手段, 但其组织情景性限制使得国外同类工具不能适用于国内人事选拔, 国内也缺乏实证研究验证其信度、效度。本研究结合某通信企业的招募选拔工作, 开发履历数据分析工具, 选取250名应聘者的履历数据、一般认知能力、大五个性和面试结果数据, 通过效标关联效度、增量效度思想, 分析履历数据有效性。结果表明, 以面试结果为效标, 履历数据具有良好的效标关联效度, 与其他测评工具组合使用时有良好的增量效度。     

不同类型的测评维度对评价中心结构效度的影响研究

本研究将测评维度分为行为能力和心理特质两组,考察对评价中心结构效度的不同影响。A公司216名部门副经理级员工接受了本次管理素质评价中心测评,采用公文筐、角色扮演和无领导小组讨论三种方法,测查行为能力和心理特质两组维度,各自有三个维度被一种以上的方法测量。多质多法和验证性因素分析的结果表明,评价中心以行为能力比以心理特质为测评维度结构效度好;以行为能力为测评维度时,会聚效度和区分效度都较好。     

对干部素质测评方法的验证

“干部测评”方法在国内的广泛运用,随之而至的就是讨论和分析测评中出现的诸多实际问题,并加以妥善解决。对“干部测评”方法作出恰当的评价,验证这一方法的正确性,也应是这一阶段的重要任务之一。验证“德才素质测评标准”量表,目的在于分析“测评标准”量表所规定的测评要素体系和参照标准体系,是否符合测评的实际需要,并探讨其科学依据。我们用定性分析与定量分析相结合的方法,对每一要素的设置逐一进行考查,证明了“测评标准”量表的合理性。对量表、效度的计算也表明,该量表的这两项指标均达到可接受的水平。     

应聘者的选拔标准识别能力对人事选拔效果的影响

应聘者对选拔标准的识别能力(ability to identify criteria, 简写为ATIC)是指个体在参与测评的过程中, 正确识别评价标准的能力, 现有测量选拔标准识别能力变量的主要方式有被试自评和研究者评分两种。众多研究发现, 选拔标准识别能力对应聘者的表现有促进作用, 它可以解释选拔的预测效度并影响其结构效度。当公开选拔标准, 提高透明度, 消除选拔标准识别能力个体差异的影响之后, 选拔的预测效度会降低, 而且对应聘者的成绩和选拔的结构效度也有影响, 但目前有关研究的结果并不统一。未来研究应关注选拔标准识别能力与其他构念的关系、完善测量方法、探索它在其他人事选拔手段中的作用, 并继续考察改变选拔标准识别能力对人事选拔的影响。     

评价中心的结构效度研究

评价中心虽然具备很高的预测效度,但其结构效度指标却不太理想,如研究普遍发现其汇聚效度和区分效度较低。影响评价中心结构效度的因素众多,如评分维度因素（数量和类型）、评价者因素（培训方式和人员类型）、测评方法因素（情景导向特征、特质激活潜力、测评活动形式）以及系统的观察与评价程序。该文从上述因素出发,综述了评价中心结构效度的相关研究,总结了提高评价中心结构效度的措施,并指出了未来的研究方向     

仿真模拟测评技术信度和效度的初步研究

本研究对典型的仿真测评技术——“角色扮演”测评方法的评分者信度、重测信度和效标关联效度进行了初步研究。结果表明：仿真模拟测评技术具有较强的岗位针对性,在相似情境中具有较高的预测效度,在某些要素上具有测评和培训的双重功能。     

评价中心的构想效度和结构模型

采用多质多法和验证性因素分析的方法,对以无领导小组讨论、文件筐和人格测验构成的一个评价中心的构想效度和结构模型进行了研究。通过对136名被试在四个测评维度上的施测,其结果表明,在评价中心中会聚效度低于区分效度,影响评价中心测评结果的主要因素是测评方法而不是测评维度,从而得到了一个以测评方法为潜变量的评价中心结构模型。从该结构模型来看,评价中心之所以起作用是由于其多个测评方法(情景)的结果。表明测评情景对于构建评价中心有着至关重要的作用。     

中学生自我调节学习量表的编制

综合自我调节学习理论的新近研究,构建了自我调节学习的7个维度,即目标设定、自我监控、努力管理、自我效能、认知策略、资源管理、动机策略。通过项目分析、探索性因素分析、验证性因素分析、信度分析等方法对量表的结构效度、外部效度和信度进行了检验。结果表明,中学生自我调节学习量表符合心理测量学的要求,可作为测评中学生自我调节学习能力的测量工具。     

人格测验在人事测评中的应用

在人事测评过程中,利用成熟的人格测验方法对管理者或应聘人员的人格特征进行诊断,可以为合理利用人力资源提供参考依据。文章首先强调了人格测验在人事测评中的必要性,在此基础上介绍了四种经典人格测验和三种管理情境中的人格测验,分析了人格测验在预测个体未来工作表现、工作风格以及实现人岗匹配方面所发挥的作用。最后,文章提出:加入社会评价性维度的人格测验可以鉴别个体是否具有健康人格,更好地发挥人格测验的三大功能。有助于企业在人事测评中合理使用人格测验。     

中层管理人员结构化面试测评效度的现场研究

通过对某上市公司随机抽取的43位中层管理人员素质测评的现场研究,探讨结构化面试的信度效度问题。研究设计基于岗位分析与关键事件分析,采用3人小组面试的方法,同时实施情景面试与行为描述面试,综合测评被试岗位胜任能力。分析结果表明,评委要素评价内部一致性和评委间内部一致性都比较高,并与面试半年后上级评定的任务绩效和总体绩效显著相关,结构化面试具有较高的信度与预测效度。进一步比较情景面试和行为描述面试发现,这两种结构化面试有类似的信度,但是行为描述面试具有更高的效度。     

护士职业承诺结构的研究

目的:寻找适用于护士群体的职业承诺测评工具,探索护士职业承诺的结构维度,以期为解释护士离职现象、稳定护理队伍提供参考。方法:引入Blau(2003)的职业承诺问卷,以344名护士为预试样本,探索职业承诺的因子结构;采用正式问卷调查500名护士,再次验证问卷的信、效度。结果与结论:护士职业承诺问卷具有良好的信、效度,其因子结构由5维度组成,包括情感承诺、规范承诺、经济成本承诺、情感代价承诺和机会承诺。     

LGD在选拔企业中高级管理人才方面的实证研究

本研究利用在为某企业人才招聘活动中提供大型人才测评服务时所收集到的数据,分析研究了无领导小组讨论测评技术的信效度。结果表明,在LGD测评技术中,评价者经过系统培训后,其评分者信度较高,但在不同要素的评价方面存在一定的差异性;在效度方面,通过多种途径的数据检验都表明LGD是一种比较有效的人才测评技术。同时,本研究还得出结论．与个性品质方面的评价相比,LGD在评价个人的能力素质特征方面更有优势。另外,结合本次人才测评的实际操怍经验．研究者还提出了有关LGD测评实施过程的应用建议。     

文化会聚自我建构问卷的编制

为探索多元文化相遇时代自我建构的结构与内涵,从文化会聚视角出发,采用文献检索、深度访谈、专家评估和问卷调查等方法,开发完成了一套文化会聚的自我建构问卷。选择具有代表性的1790名被试,895名被试进行项目分析和探索性因子分析,另外895名被试进行验证性因子分析和信度检验。另取样197名被试完成效标关联效度检验。结果发现：文化会聚自我建构包含个体性、关系性、集体性、自主性、平等性五个维度;文化会聚自我建构问卷的信度和效度良好,可作为有效的测评与研究工具。     

无领导小组讨论的多侧面Rasch模型应用*

采用项目反应理论(IRT)的多侧面Rasch模型(MFRM),分析评价中心技术中无领导小组讨论(LGD)的测评结果,探讨被试能力水平、评委评分宽严度、评分内部一致性、维度难度和评定等级等问题,进而讨论各种偏差。通过 MFRM 分析人事测评结果,可深入了解被试能力的真实差异、甑别维度难度、探查测评误差源,从而完善测评试题编制、评估或诊断评委合格性、提高测评维度与测评目的匹配性,为拓展项目反应理论在人事测评中的应用提供独特视角。     

基于复杂网络模型构建人事测评指标体系

构建完整的人事测评指标体系是实现人力资源管理科学化和信息化的关键。借鉴复杂网络模型的思想,可遵循三个步骤提升人事测评指标体系的构建水平:首先,利用方格技术提取人事测评的核心素质指标,使指标元素的设定更具操作性;接着,借用复杂网络模型刻画指标之间的内在关联,基于复杂网络的一些客观度量值确定指标的相对重要性,使指标权重的设定更具客观性;最后,使用隶属网汇总指标分数,提升测评结果的可视化程度。     

大学生情感倦怠研究

通过对116名大学生开放式问卷和523名大学生预测问卷的测试结果进行分析,编制出二维结构的大学生情感倦怠问卷.经过信、效度的检测及问卷的验证分析,表明该问卷可以作为测评大学生情感倦怠的有效工具.     

中国青少年积极发展量表（简版）的编制：基于一个大样本数据

中国青少年积极发展量表是一个多维度的测评青少年发展过程中积极特性（即品格、能力、自信和联结）的量表,共98个项目。为提高量表的应用推广性,本研究基于一个大样本数据（n=16317, M_年龄=13.13岁, SD=2.52岁）创建了一个该量表的简化版本。通过一系列的验证性因素分析、项目筛选、信效度检验以及交叉验证,简化后量表共48个项目。结果显示,简版量表与原始完整版量表有足够的概念重合度和剖面相似性,且具有可以接受的信效度和测量结构的等值性。