双因子项目反应模型在研究生招生考试质量分析中的应用

研究生招生考试中学科专业能力的考查,主要采用的是“大综合”形式的试卷,即将学科专业基础课程的知识集中在一张试卷上进行考查。“大综合”的试卷形式大大提高了试卷的命制难度,也对试题质量提出了极高的要求。针对2022年全国硕士研究生招生考试心理学专业基础科目的抽样作答数据,采用双因子项目反应模型对试题质量进行分析。研究显示,整套试卷命制基本符合“大综合”试卷的命制要求,其中心理学一般因子作为主要的考查维度,具有良好的区分度;而特殊因子(课程因子)的表现存在差异。从能力密度曲线来看,实验心理学、心理统计与测量两个因子的选拔性功能更强。

高阶项目反应模型的发展与应用

在测量具有层阶结构的潜质时,标准项目反应模型对项目参数估计和能力参数估计都具有较低的效率,多维项目反应模型虽然在估计第一阶潜质时具有高效性,但没有考虑到潜质层阶的情况,所以它不适合用来处理具有层阶结构的潜质;而高阶项目反应模型在处理这种具有层阶结构的潜质时,不仅能够高效准确地对项目参数和能力参数进行估计,而且还能同时获得高阶潜质与低阶潜质。目前存在的高阶项目反应模型有高阶DINA模型、高阶双参数正态肩型层阶模型、高阶逻辑斯蒂模型、多级评分的高阶项目反应模型和高阶题组模型。未来对高阶项目反应模型的研究方向应注意多水平高阶项目反应模型、项目内多维情况下的高阶项目反应模型以及高阶认知诊断模型。

贝叶斯项目反应模型及nimble实现

针对国际学生评估项目2015年数据(PISA),采用单参数、双参数和三参数的项目反应模型进行建模,在每个模型下,分别采用logistic连接函数和probit连接函数。针对6个模型,应用偏差信息准则(Deviance Information Criterion,DIC)和伪边际似然对数(Logarithm of Pseudo-Marginal Likelihood,LPML)进行模型评价和模型选择。结果表明,当连接函数为logistic双参数的项目反应模型表现最好,因为这个模型下的DIC值最小,并且LPML值最大。我们采用R软件nimble包进行编程。

多维项目反应理论二级评分模型的参数估计

利用DSY算法开发了多维二级评分模型的参数估计程序,推广了该类评分模型的参数估计方法,比较了MCMC和DSY算法,说明了DSY算法能有效估计该类型评分模型的参数,提出了一些有待研究的问题.

多水平项目反应理论模型在测验发展中的应用

作者简要介绍了多水平项目反应模型,对多水平项目反应理论与通常项目反应理论之间的关系进行了探讨,得到了多水平项目反应模型参数与通常项目反应模型参数之间的关系,并讨论了多水平项目反应模型的推广模型。通过一个实际例子,用多水平项目反应模型对测验中项目的特征进行了分析,检验了个体水平和组水平预测变量对能力参数的影响,并对项目功能差异进行了分析。最后文章就多水平项目反应理论模型的优势与不足进行了讨论。

化零为整的宏观社会数据生成:基于潜变量模型和动态贝叶斯方法

对因果机制和对宏观检验的探寻催生了定量社会学研究对区群层面数据的需求,然而这类高质量的追踪数据资源相对稀缺。传统研究通常通过综合多个来源的个体社会调查数据来构建面板数据集以改善宏观数据匮乏现状,但其亦受制于社会调查在时间和空间分布上的稀疏性以及不同调查间的差异性。本文引介了一种可用于生成区群层面跨时空面板数据的动态贝叶斯潜变量建模框架,并通过应用实例展示了该方法的具体应用过程,比较了动态贝叶斯方法相较于几种常用的缺失值插补方法的优势。本文的示例结果表明,动态贝叶斯潜变量模型在跨时空、多维度的信息整合和参数不确定性探索方面具有重要的优势,可以实现对调查数据缺失年份或地区的估计和插补,大大缓解了社会学研究中面板数据不足的问题。

用非参数项目反应理论模型研究大规模教育考试维度的问题

大规模教育考试的维度与考试分数的意义解释、考生在考试中的行为表现解释密切相关。利用非参数项目反应理论模型选择试题组成单维量表,可以达到研究考试维度的目的。选择单维量表试题时,下界c值的确定,是个值得探讨的问题。用非参数项目反应理论模型对英语考试的三个量表维度研究发现,从每一个量表中只能选择出一个单维量表,而不是与每一部分测量的微技能数相应的多个单维量表;每一单维量表测量的均为该部分不同微技能的组合。这个特征表明这些单维量表均为基本单维量表,非严格单维量表。无论c值为0.3,还是0.2,选择出的基本单维量表均满足弱单调性要求,整个单维量表的区分功能不会有明显差异。

项目反应理论下等值方法——在Samejima模型下,用比准则求解等值系数

本文首先介绍了项目反应理论的优势、项目反应模型及一些等值的方法,然后详细用R方法对Samejima等级反应模型进行处理和模拟,以检测其误差及优劣性。

非参数项目反应理论模型及其在教育考试中的应用

非参数项目反应理论模型包括单调均匀性模型和双单调模型。用单调均匀性模型对某英语听力考试结果研究发现,按照顺序选择法,可从16道听力试题中选出11道满足要求的试题,组成单维量表。用考生在这11道试题上的总得分对考生进行排序与按照潜质排序等效。利用双单调模型对11道听力试题组成的单维量表进行试题功能偏差研究发现,有5道试题在女生子群体中的排序与在男生子群体以及整个群体排序不同,显示女生子群体作出正确应答的概率明显高于男生子群体作出正确应答的概率。这种差异至少部分是由两个子群体听力能力上的差异引起的。

项目反应理论复杂模型发展与参数估计

项目反应数据的建模过程属于项目反应理论范畴,被称为现代测量理论。随着社会测量要求的广度和复杂度的增加,以及测量功能的不断扩展的要求,需要越来越复杂的项目反应模型来完成心理学、教育学、社会学等领域的测量任务。本文就当前较普遍以及发展迅速的项目反应复杂模型,如高阶、多维、多层模型进行论述,并且描述了复杂模型的参数评估技术,结合复杂模型的应用情况,期望本土的测量技术向客观化、尖端化发展。

项目反应理论新进展之题组反应理论

通常把测验中共用同一刺激的项目集合称为题组,并把由共同刺激引起的题组项目反应间的相依性称为题组效应。本文首先分别对题组、局部独立性和局部依赖性的概念进行了介绍和梳理,并结合前人研究给出了题组效应的概念。之后在阐明直接使用标准项目反应模型去拟合题组反应数据会导致参数估计偏差等诸多问题后,引出能更好地处理题组效应的题组反应模型。全文详细介绍了包括高阶题组模型和多水平题组模型在内的6种题组反应模型,通过对"如何理解题组反应模型中的区分度参数"和"题组反应模型与多维项目反应模型的关系"两问题的探讨,认为:(1)题组反应模型与标准项目反应模型中的区分度参数含义并不相同,直接将两者进行对比是不合理的;(2)题组反应模型属于广义多维项目反应模型,与狭义多维项目反应模型的主要区别在于满足广义局部独立性假设时所需要控制的潜因素不同。

测验理论的新发展:多维项目反应理论

多维项目反应理论是基于因子分析和单维项目反应理论两大背景下发展起来的一种新型测验理论。根据被试在完成一项任务时多种能力之间是如何相互作用的,多维项目反应模型可以分为补偿性模型和非补偿性模型两类。本文在系统介绍了当前普遍使用的补偿性模型的基础上,指出后续研究者应关注多维项目反应理论中多级评分和高维空间的多维模型、补偿性和非补偿性模型的融合、参数估计程序的开发和多维测验等值四个方面的研究。

四参数Logistic题组反应模型的贝叶斯估计

项目反应理论中4PL项目反应模型是在3PL项目反应模型基础上发展起来的,它进一步对模型进行优化,加入失误参数,即引进一条上渐近线,使得估计结果更加准确。传统的项目反应模型往往忽略题目之间的相依性,所以为了使估计更加符合实际,将4PL项目反应模型与题组反应模型结合起来,提出了4PL题组反应模型。将这个模型运算出的结果与4PL项目反应模型的结果相比较,对比结果表明:题组效应不可忽略,2组参数估计结果差异显著。其中,针对4PL项目反应模型和4PL题组反应模型的参数数据,采用Win BUGS软件进行处理。

相依项目反应数据的Copula建模法

与经典教育测量方法相比,基于项目反应理论(IRT)的教育统计与心理测量技术呈现出愈来愈多的优势.将Copula方法引入到IRT中来分析相依反应数据,对题目的边际反应概率和题目反应间的相依结构分别建模,更好地解决了项目局部相依性问题.

基于项目反应理论的教育测量模拟软件-WinGen

WinGen是一种基于Windows系统下的项目参数、被试以及作答数据的模拟软件,该软件不仅支持众多的单维项目反应模型,也支持多维项目反应模型。研究通过使用WinGen实现被试、项目和作答的蒙特卡罗模拟,并用Bilog对作答数据进行了参数估计,最后通过计算参数估计的各个评价指标,结果表明使用WinGen模拟的数据质量优良,与模型的拟合性较好,可以满足广大测量研究者在不同条件下数据的模拟,研究者可以在模拟数据的基础进行进一步的分析和研究。

全信息项目双因子分析:模型、参数估计及其应用

全信息项目双因子分析作为一种重要的统计方法,使得双因子模型在近20年得到重新认识和广泛应用。首先详细介绍了全信息项目双因子分析方法的概念、特征、模型基础以及参数估计中体现的维度缩减思想,然后例举全信息项目双因子分析在分析测验结构、分数解释和计算机化自适应测验中的应用。全信息项目双因子分析中双因子模型符合大量心理、教育与医学测验的结构特征,其维度缩减方法能显著降低计算量,因而具有广阔的应用前景。结合当前研究现状对全信息项目双因子分析的相关研究,如:参数估计、模型特征、拟合检验、量表连接、项目功能差异及其在计算机化自适应测验中的应用提出一些思考和建议。

HSK潜在维度的探索性分析——多维项目反应理论的应用

本文采用多维项目反应理论(MIRT)中的补偿型模型,探索性地分析HSK(初中等)阅读部分的潜在维度空间,为HSK的构想效度研究提供一个佐证。实验使用自编程序估计参数。在模型拟合检验时,应用聚类分析技术为被试分组。结果表明:三维的MIRT模型是阅读部分的最佳心理计量模型,其中维度1能较好地区分被试,是阅读部分的主要测量对象。维度1与维度2所代表的能力呈一定相反的变化趋势,维度3较"独立"于其他两个维度。

项目反应理论研究综述

项目反应理论是一种现代心理与教育测量理论，在美国、英国等发达国家已被广泛而深入地运用于计算机化自适应测验之中。首先介绍了项目反应理论的核心概念；接着对项目反应理论模型进行了分类；然后对典型项目反应理论模型进行了精要论述；最后指出了当前项目反应理论研究的热点及趋势。

变异系数加权组合赋权模型的乳腺癌治疗质量维度融合及评价

目的基于两参数项目反应模型计算乳腺癌各维度治疗质量,利用变异系数加权组合赋权模型进行维度赋权,加权计算乳腺癌维度融合的综合治疗质量,为改善治疗质量提供依据。方法选择不同维度乳腺癌治疗质量的评价指标,收集医院乳腺癌患者的病历数据,利用两参数logistic项目反应模型计算各维度治疗质量;利用序关系分析法(garbage-first,G1法)计算主观权重、余弦夹角法计算客观权重、将主客观权重纳入变异系数加权组合赋权模型获得组合权重;加权计算维度融合后的综合治疗质量并进行评价。结果选择三个维度的9个乳腺癌治疗质量评价指标,三个维度分别为功能评价、治疗方法及术前检查,收集9家医院3669例患者的完整病历信息。计算获得医院的各维度治疗质量:功能评价维度最高得分为1.0317,治疗方法维度最高得分为0.9232,术前检查维度最高得分为1.2001。G1法算得三个维度的主观权重分别为0.5364、0.2980和0.1656;余弦夹角法算得客观权重分别为:0.5220、0.3554和0.5868。利用变异系数加权组合赋权模型获得各维度组合权重:第9家医院的功能评价维度最大组合权重为0.5293,第5家医院的治疗方法维度最大组合权重为0.3209,第1家医院的术前检查维度最大组合权重为0.3857。加权计算融合后的综合治疗质量:排名前三的医院分别为第1家,第7家和第9家医院,综合得分分别为1.04220,1.0371和1.0157。结论研究提示组合权重法能在主客观权重出现极值时获得更稳定的权重,使融合后的治疗质量排名更合理;功能评价维度对综合治疗质量的影响较大,提高功能评价维度的使用率有利于改善乳腺癌的治疗质量。

多维题组效应Rasch模型

首先,本文诠释了"题组"的本质即一个存在共同刺激的项目集合。并基于此,将题组效应划分为项目内单维题组效应和项目内多维题组效应。其次,本文基于Rasch模型开发了二级评分和多级评分的多维题组效应Rasch模型,以期较好地处理项目内多维题组效应。最后,模拟研究结果显示新模型有效合理,与Rasch题组模型、分部评分模型对比研究后表明:(1)测验存在项目内多维题组效应时,仅把明显的捆绑式题组效应进行分离而忽略其他潜在的题组效应,仍会导致参数的偏差估计甚或高估测验信度;(2)新模型更具普适性,即便当被试作答数据不存在题组效应或只存在项目内单维题组效应,采用新模型进行测验分析也能得到较好的参数估计结果。