自适性语言测试题库CTT与IRT参数估计对比研究

在计算机自适应性(CAT)与评价中,题库是测试系统实现的基础,其中题目参数估计质量是决定题库建设的核心和必要条件。研究以22582名中国汉语水平考试(HSK)考生的实测大数据为基础,采用分层随机抽样法,对获得的8个不同容量的被试样本进行了CTT和IRT参数的估计及比较研究。结果发现,在样本分布同质性前提下,当样本规模在500以内时,CTT与IRT的项目难度参数、区分度参数之间一致性较差;项目的区分度参数稳定性不高;考生能力参数之间存在显著相关性。在远程自适应性语言测试的题库建设中,建议采用大样本IRT参数估计方案。

基于IRT框架的乡村旅游发展评价研究

近些年我国乡村旅游发展势头强劲,国家也在积极推动乡村旅游发展,乡村旅游已经成为助力乡村发展和实施乡村振兴的重要途径。有效评价乡村旅游发展状况,可以引导乡村旅游发展方向,助理乡村旅游发展。本文全面梳理一体化乡村旅游框架的内涵、包含要素及其含义等内容,并对一体化乡村旅游各维度权重进行设计计算,旨在评估旅游业的维度整合方向,以便将评估结果应用到农村地区经济发展中。

基于IRT若干参数估计方式的比较

在项目反应理论(IRT)框架下,就目前流行的若干能力参数和项目参数的估计方法进行分析比较,阐述了它们各自适用的范围和不足之处,为选用估计方法提供依据.

基于IRT模型参数的BP神经网络估计

该文依据项目反应理论(IRT)的0-1记分模式,应用BP神经网络对项目参数和考生能力进行估计。在对这些参数进行估计时,将得分矩阵分别采用得分率、通过率、相关系数、猜测率进行降维处理。此方法经计算机模拟实验,结果与目前流行的参数估计方法进行分析比较,能得到更好的精度,降低了误差。训练好的网络可以用于实际测试中,并且只需较少的人数和题数,能得到较好的精度。在计算机模拟实验过程中,考生能力和项目难度、项目区分度采用正态分布比均匀分布要好得多。

迫选式人格测验的传统计分与IRT计分模型

迫选测验的传统计分方式会产生自模式数据,不能进行传统的信效度检验、因素分析和方差分析等。近年来研究者提出了一些基于项目反应理论的计分模型,如瑟斯顿IRT模型和MUPP模型等,它们可以规避自模式数据的弊端。瑟斯顿IRT模型方便进行参数估计,模型定义灵活;而MUPP模型的拓展性较差,参数估计的方法有待提高。另一方面,已有研究者基于MUPP模型开发了一些抗作假的迫选测验,而瑟斯顿IRT模型距离这种应用还比较远。此外,两个模型的适用性和有效性都有待更多的实证研究来检验。

IRT中Logistic模型的c、γ参数对能力估计的改善

设计一个理想测验和被试作答情况,在单、双参数模型下进行能力估计,存在第一、二未契合现象;增加c参数后进行能力估计,则能有效纠正第一未契合现象,仍然存在第二未契合现象,同时存在第三未契合现象;增加γ参数后进行能力估计,则能有效纠正第二未契合现象,仍然存在第一未契合现象,同时存在第四未契合现象;同时增加c、γ参数后进行能力估计,则能有效纠正第一、二、三、四未契合现象。最后概述了c、γ参数的测量含义。

缺Fe/Zn及盐胁迫下苋菜对Cd及矿质元素的吸收与IRT1表达的关系

选用Cd低累积品种白梗尖叶苋菜(B)和高累积品种花红苋菜(H)2个苋菜品种,采用水培法分别研究了在缺Fe、缺Zn和盐胁迫3种处理条件下2个苋菜品种对矿质元素以及cd的累积特征,并通过测定2个品种不同处理根部IRT1(铁离子转运蛋白)的表达量,建立了缺Fe/Zn及盐胁迫下苋菜对Cd及矿质元素的吸收与IRT1表达的关系。结果表明,3个处理组中2个苋菜品种生物量均显著低于对照组,缺Fe以及缺Zn处理显著促进了2个苋菜品种对Cd以及矿质元素的累积,而盐胁迫显著抑制了苋菜对Cd的累积,同时促进了其对矿质元素的累积(P<0.05)。不同处理下,Zn、Fe相关转运基因IRT1的表达差异显著,IRT1表达量的增加可以促进植物对Cd、Fe、Zn、Mn、Mg等元素的吸收(P<0.05)。

高考数学中考试评价的研究——基于CTT与IRT的实证比较

相关研究表明,IRT在教育考试评价中比CTT具有诸多优点。本文以某地区高考数学考试数据为基础,比较CTT与IRT在项目参数、评价方式、精度估计三个方面之间的差异。研究结果证明,在IRT下参数更容易反映观测各个项目的特征属性,IRT参数比CTT参数更具精确性,项目信息函数能更好的反映试题信息;CTT与IRT的评价方式不同,IRT下的能力分数优于CTT下的测验分数,更能反映学生能力水平;CTT与IRT精度估计不同,IRT测验信息函数和能力置信区间比CTT有更好的精度。实证展示出IRT在高考数学考试评价中的优越性,具有重要的价值和应用前景。

基于IRT模型的BP神经网络降维法参数估计及其应用

该文对应用BP神经网络和降维法相结合在 0 - 1记分模式下估计项目参数和考生能力的方法作了概述 。

IRT在自适应考试中的应用

随着计算机技术在考试中的应用,自适应考试正日益成为人们关注的研究课题。主要介绍了()及其在计算IRTItem Response Theme 机化的自适应考试系统中的应用,同时简要说明了自适应考试与非自适应考试的区别以及当前自适应考试的一些研究方向。

Likert量表分析中不同IRT模型的有效性

5级Likert量表可直接分析,也可以转化为3级评分,或转化为2级评分,前二者可以采用等级IRT模型,后者可以采用2级IRT模型。研究表明2级IRT模型中的2参数模型是最适合的模型。多级评分模型与数据拟合也很好,而且等级越多测量精度越大。

IRT题库系统的分布式体系结构研究

结合题库系统的结构设计,采用分布式体系结构的多种设计模式和应用架构,介绍了三层结构J2EE应用程序在题库系统中的实现过程。实践表明,这是一个易于实现,方便维护,低耦合性,并且具有分布式部署能力的多层应用结构,是基于Web的IRT题库系统的一种新的尝试。

正念注意觉知量表IRT分析研究

正念注意觉知量表(MAAS)是测量正念注意水平最常用的量表之一,以中小学教师为被试,以项目反应理论用方法与技术对量表各项目的区分度、域值和信息函数峰值4个参数做了分析探讨。结果显示MMAS支持单维性假设,具有良好的心理测量学指标,对正念注意水平的测量具有较高的精准性。量表存在6个信息量很高的项目,其信息量之和接近量表总信息量的70%,提示这几个项目可以构成一个简式量表。对新量表做验证性因素分析,各项指标达到要求。

国家公务员结构化面试中评委偏差的IRT分析

使用项目反应理论(IRT)中的多面Rasch模型,对两组共12名评委在国家公务员结构化面试中的评委偏差进行了分析。提出并验证了两种评委偏差:评委之间在宽严程度上的差异和评委自身的一致性问题。结果发现:不同评委之间在宽严程度上差异显著,且不同评委评定行为的跨考生、跨维度、跨性别、跨时间的自身一致性也存在差异。研究表明,这种进入到评委个体层次的分析突破了经典测量理论(CTT)定位于评委群体进行分析的局限,针对每位评委的偏差行为提供了详细具体的诊断信息,从而为评委的针对性培训和评委库的建立提供了现代测量学的新方法。

CTT与IRT方法对人格测验结果处理的比较研究

为了说明使用经典测量理论(CTT)方法和项目反应理论(IRT)方法计算出的人格测验结果的差异,本研究使用IRT和CTT这两种方法分别计算出模拟人格测验和实际人格测验的测验结果,并对此进行比较。研究表明,两种不同的方法得到的测验结果之间平均有0.11个标准差以上的差异。进一步研究发现,在对测验结果进行分析时,IRT方法比CTT方法更为有效。

IRT展开模型及对非累积反应机制的检测

被试回答人格测验题目时并不是特质水平越高其得分率越高,这称为非累积反应机制。广义等级展开模型GGUM就是针对这一机制提出来的。使用EPQ和五因素人格问卷发现GGUM比累积IRT模型有更好的模型拟合度和测量精度。研究结果表明GGUM有其合理性,且有助于反应心理过程机制的深入探讨。

混合IRT潜在模型及其应用轨迹

项目反应理论是测量被试潜在特质的现代测量理论,潜在类别分析是基于模型的潜在特质分类技术。混合项目反应理论将项目反应理论与潜在类别分析相结合,能够同时对被试分类并量化其潜在特质。在阐述混合项目反应理论概念、原理的基础上,介绍了MRM、mNRM和mPCM等几种常见混合模型及其参数估计方法,并从心理与行为特征分类、项目功能差异检测、测验效度评价等方面评述了其在心理测验中的应用发展轨迹。

多水平IRT的发展与应用述评

阶层线性模型是处理阶层结构数据的高级统计方法,项目反应理论是精确测量被试能力的现代测量理论。多水平项目反应理论将阶层线性模型和项目反应理论相结合,将项目反应模型嵌套在阶层线性模型内,实现了项目参数和不同水平能力参数的估计,对回归系数和误差项变异的估计也更加精确。作者概述了多水平项目反应理论的发展历程,并从项目功能差异、测验等值、学校效能研究等方面评述了多水平项目反应理论在心理与教育测量中的应用,总结了多水平项目反应理论的价值,同时展望了今后的研究趋势。

被试作答的偶然性对IRT能力估计的影响研究

被试能力参数估计是项目反应理论应用研究最重要的技术之一。本文在理想的测验情境下,研究被试作答的偶然性对被试能力值估计的影响。研究设计了被试作答的两种偶然性情况:一是偶然做对了一道项目难度高于其能力值的试题,二是偶然做错了一道或几道项目难度低于其能力值的试题,然后分别探讨了这两种情况下对被试的能力估计所带来的影响,并且就如何消除这些偶然性所带来的影响提出了相应的方法。

基于CTT与IRT的试卷质量评价系统设计与实现

针对现有试卷质量评价理论依据不充分、分析指标标准不一,科学性差的特点,结合CTT(classical test theory)真分数不变性、误差安全性及IRT(item response theory)参数不变性、线性等值等优点,提出了一个基于CTT和IRT的试卷质量评价系统的建设思路,并完成系统实现。以某大学五门课程试卷及考生成绩为例,进行了试卷分析和试题分析,分析结果显示,IRT得到的学生能力更贴近实际情况,正确反映了学生能力在该考试中的位置,通过分析结果说明考试排名与学生的客观能力的符合程度,并给出该次考试试卷的改进建议。