表现性评价中评分者信度估计方法的比较研究--从相关法、百分比法到概化理论

随着素质教育的推进．表现性评价受到越来越多的重视。影响表现性评价结果信度的一个重要因素是评分者之间的不一致。文章使用模拟数据,在对比评分者一致性的相关法、一致性百分比法和概化系数等各种估计方法的基础上,提出概化理论在表现性评价中评分者信度问题上的应用是理论和实践发展的有益方向。     

质性研究中编码者信度的多种方法考察

质性研究中检验编码者信度的方法有归类一致性指数、编码信度系数、相关系数、中位数检验、概化系数等。基于教师胜任力访谈数据集,对编码者信度考察结果表明,归类一致性指数和编码信度系数受相同编码数影响而不稳定,相关系数受数据类型制约,中位数检验受研究设计影响,概化系数则受编码者和编码项目的数量影响。研究中须合理选用。     

多元概化理论在评定量表编制中的作用——以音像教材测评数据分析为例

目前多元概化理论已开始在考试、评价领域得到应用,但是很少有研究者关注其对评定量表编制的作用.本文认为多元概化理论的G研究可以估计各种效应带来的变异,能够据此(1)考察评定量表各维度和总体信度;(2)确定评定量表各维度的权重;D研究可以评估各种测量方案的信度,能够据此(3)确定评定项目的数量.这三个方面都是编制评定量表必不可少的环节,本文采用音像教材的测评数据,用实证方法展示多元概化理论对评定量表编制的指导作用.     

条件性推理测验：人格测验的新思路

条件性推理测验关注人们如何解决表面上看上去类似于传统归纳推理测验的问题,其真实目的是根据反应者是否将基于某种内隐偏差的解决方案视为合理的,进而评估反应者的人格倾向.有证据表明该方法可以有效防止自陈问卷的有意扭曲等相关问题,获得更可靠的结果.这种测评思路在成就动机和攻击性两个领域的研究中已经获得初步成效,测验的信度和效度都较为理想.然而也需指出,这一新思路尚处在发展中,还有一些问题如施测方法、测验构建和思路拓展等需作进一步探讨.     

适应性测验的发展:历史与现状

适应性测验作为一种测验形式,与传统的纸笔测验形式相比,具有省时、高效等很多优越性。测验应该适合于被试的理念最初可见于比内的智力测验。上世纪七十年代以来,适应性测验的研究从经典测量理论阶段发展到项目反应理论阶段,经历了从二阶段、三阶段、多阶段测验、固定分支测验和分层适应性测验的发展,到现在的计算机化适应性测验研究。随着项目反应理论和计算机技术的发展,计算机化适应性测验已经在教育和心理测验领域中得到广泛应用。目前对它的研究日益深入,主要有项目克隆、项目曝光、多维适应性测验、被试诊断、人格适应性测验等问题。     

检验项目功能差异的两类方法-CFA和IRT的比较

目前在验证性因素分析(CFA)和项目反应理论(IRT)两个领域,都有一些检验方法来识别项目功能差异(DIF)。该文主要针对单维的多级计分项目,分别介绍CFA和IRT检测DIF的方法,并进行二者的比较。     

计算机自动化项目生成概述

近年来,计算机自动化项目生成作为应对测验项目曝光问题的很具前景的一项技术,逐渐得到越来越多研究者的重视。这种技术是以认知心理学和心理测量学为基础,在测试过程中借助计算机自动生成目标难度水平的项目。该文首先简要介绍了这种技术的理论基础和两种具体方法,然后以项目设计系统法为例说明自动化项目生成研究的具体步骤与优点,最后评述了这种技术的局限性及未来的发展趋势     

我国中学生职业兴趣的特点与测验编制

随着当前就业压力的增加,社会竞争也愈演愈烈,职业生涯规划的问题逐渐受到人们的重视。本文基于当代高中毕业生选报大学专业时对自身兴趣特点深入了解的需要,在国内外职业兴趣研究的基础上,探讨了我国高中生职业兴趣的特点,并编制出一套适合当前中国高中生兴趣特点的职业兴趣测验。该测验将职业兴趣分为七种类型：艺术型、事务型、经营型、研究型、自然型、社会型和技术型。测验的信、效度测量指标均达到比较满意的水平。经过初步推广使用,获得了广大使用者的好评。     

插图在说明文阅读理解中的作用

研究的目的在于揭示插图对说明文阅读理解的影响。实验中使用移动窗口技术对阅读过程中插图的作用进行探讨,并考察空间想象能力在其中的作用。结果表明：１．插图可以改进说明文的阅读理解,提高阅读速度;２．插图可以帮助读者建立文章所描述物体的参照表征,在建立参照表征的过程中,插图有利于重要概念的理解和有关参照表征信息的整合;３．插图有助于空间想象能力低的读者理解重要概念以及整合有关信息。     

在中文阅读中字音、字形的作用及其发展转换

采用接近正常阅读的校对任务,探讨字音,字形在中文阅读中的作用及其发展变化,结果表彰词识别能力随着年级,语文能力的提高而增强。（２）在中文的字词识别过程中,确实存在着发展转换,初学阅读者在阅读中主要依靠的是字音;而成人熟练读者则主要依靠的是字形,在同一年级内,能力高的儿童首先向下一阶段转换。