基于多元概化理论的英语口语测试任务研究

基于多元概化理论,对某次口语测试所包含的朗读、听后回答、回答问题、听后复述四类常见的测试任务进行研究,重点关注不同类型测试任务的区分效果、测量精度和对总分的贡献程度。研究结果表明,偏封闭型、内容导向的测试任务相比偏开放型、技能导向的测试任务,在区分效果、测量精度和对总分的贡献上表现更好。

领悟社会支持量表的多元概化分析

目的:拟用多元概化理论考察领悟社会支持量表在高中生群体中应用的测量学性能。方法:以p×i随机测量模式的概化设计,针对1500名在校高中生进行领悟社会支持调查。结果:三个因子的相关程度较高(0.65以上);整体量表的概化系数和可靠性指数均达到了0.9以上,而各因子在0.77以上。结论:整体量表及各因子在高中生群体中应用的信效度较高,可用作常模和标准参照测验;量表在各因子的分值比和项目数上,设计较合理和完善。

从多元概化理论看高考综合能力测试的改进

通过多元概化理论的研究发现 ,高考综合能力测试 (2 0 0 1,广东 )的总体信度达到了可以接受的水平(0 .784 )。但测验中各部分对总方差的贡献程度与预定的赋分比例有较大差距。其中 ,地理和政治的贡献度偏低 ,化学和历史的贡献度偏高。这表明有 (历史和化学 )偏科特点的考生得到了较高的综合分数。又经决策 (D)研究发现 ,增加地理部分的题量会反常地降低测验的总体信度 ,这说明有不少高分考生答错或主动放弃了地理科题目。因此 ,如何有效控制各部分的实际贡献程度、避免负面导向效应是当前高考综合能力测试亟待解决的问题。

概化理论在人事测评中的评分者一致性研究

概化理论是一种重要的信度理论,依据测验维度的多少,可分为一元概化理论和多元概化理论。在人才招聘中,常用无领导小组讨论和行为面试两种技术对候选人的综合能力进行测评。为研究测试中的评分者信度,本研究应用一元交叉设计和多元交叉设计对某公司的某次人事测评结果的评价者一致性信度进行评估。研究结果表明,两种模式下的信度系数都达到了较高水平,相比较而言,一元交叉设计信度低于多元交叉设计的合成概化系数。在评分者个数增加到4-6个时,测试的评分者信度会有较大的提高。

韦氏儿童智力量表能否测量第3因子——WISC-CR的多元概化理论研究

本文针对WISC -CR的二因子和三因子模型 ,以 2 0 1位 6至 7岁小学生为对象 ,运用多元概化理论的方法研究了其总信度和各亚因子的测量信度。研究发现 :(1)二因子模型下各亚因子与总测验的测量信度都比较高。但当它被作为测量言语理解、知觉组织和抗干扰三个因子的量表时 ,第 3个因子的测量信度过低 ,且不易得到改善。这表明不宜用它来测量抗干扰的能力 ;(2 )该量表不宜作为标准参照性测验来使用 ,因为其测量信度无法得到保障。此外 ,文章还展示了评价一个成套测验总信度及其亚能力因子信度的MGT方法 。

多元概化理论在结构化面试中的应用研究

使用多元概化理论对由7名评委和34名考生组成的结构化面试数据进行了分析。结果表明:1.面试设置的5个维度中,仪表举止维度与其它4个维度之间的协方差相对较小;2.各个维度的概化系数都在0.69以上,其中,概化系数最小的是仪表举止维度,最大的是口语表达维度;3.通过增加评委人数可以提高面试信度,但增幅递减。

高校教师教学水平评价多元概化理论权重效应分析

探讨高校教师教学水平评价多元概化理论合成信度的权重效应。使用"高校教师教学水平评价问卷",要求534名学生对16名教师进行评价,对收集到的数据作嵌套设计的多元概化理论分析。结果表明:(1)在高校教师教学水平评价中,多元概化理论合成信度估计权重、先验权重和效果权重产生不同效应;(2)结合高校教师教学水平评价,在充分分析三种权重对合成信度影响的基础上,提出了多元概化理论"合成信度三种权重效应分析模式图",能为正确使用多元概化理论权重提供科学参考。

用多元概化理论对普通话的测试

用多元概化理论 (MGT)研究了国家语委编制的普通话测验。在G研究中 ,利用香港人普通话测试的数据 ,估计了引起分数变异的各种来源的方差与协方差分量。在D研究中 ,首先估计了该测验 3个部分的全域分数和各自的概化系数等技术指标 ,然后估计了全域合成分数及其概化系数、信噪比等指标。结果表明 ,该测验的信度从总体上讲是较高的 ,把三个部分的全域分数进行合成也是合理的 ,但从细节上看其第 3部分的信度较低。另外 ,当评分者个数为 3、试题数量为 2 8时 ,测验的第 1、2部分的信度已经较高 ,因此 。

概化理论研究及应用前景

1972年,Cronbach和他的同事们提出概化理论之后,概化理论在行为与心理测量领域得到了广泛的应用,较之经典测量理论,它的优势逐渐地显露:(1)测量的多种误差来源可以在同一个分析中分别估计;(2)可以指导决策者选择最优测量方案;(3)提供可靠性系数:概化系数(G系数)和依存性指标( 系数)用于不同的决策任务;(4)排除了严格平行测验的假设。概化理论以它的精确性和可靠性受到了信度测量领域研究者们的青睐,本文旨在对概化理论的基本框架、产生、发展及应用前景进行详细论述。

青少年学习倦怠量表的多元概化分析

运用多元概化理论考察青少年学习倦怠量表(ASBI)的测量学属性。结果发现,ASBI各因子以及全量表的概化系数和可靠性指数均达到较好水平,既可用于常模参照测验,也可用于标准参照测验;各因子的分量比例还不尽完善,低成就感对全域总分的贡献略低于在全量表中的分值比重,对相对误差方差贡献最大的是低成就感,学业疏离对绝对误差方差的贡献最大;今后ASBI的修订工作,可考虑对学业疏离和低成就感因子条目质量的改进,同时适当增加身心耗竭因子的条目数以提高其测量信度。

中文版“工作投入量表”测量信度的分析——基于多元概化理论和310名教师的调查数据

在应用工作投入量表(中文版UWES)对310名小学教师进行测试的基础上,运用多元概化理论对数据展开系统分析。结果表明:工作投入量表的整体测量信度高,它既可用于常模参照测验又可用于标准参照测验,其三个维度也有较高的测量信度;工作投入量表的各个因子分值比例比较适宜;在信度要求稍低的测验情景中,可采用精简版的工作投入量表对工作投入进行替代测量。

客观结构化临床考试的多元概化模型研究

探讨客观结构化临床考试 (OSCE)的可靠性 ,为改进其设计和提高考试可靠性提供依据。根据概化理论 ,拟合两因子多元概化模型 ,探讨 OSCE及其分测验的可靠性 ,同时考察各分测验样本含量的变化对各自测验信度和全域合成总分测量可靠性的影响。结果 OSCE合成全域总分的概化系数为0 .4 4 2 17,SP考站的概化系数为 0 .6 5 86 4 ,非 SP考站作为常模参照测验 (概化系数 0 .2 1999)不理想。研究表明今后 OSCE设置 8个 SP考站与 14个非 SP考站即可达到测量的可靠性要求。

评价中心结构效度的多元概化理论分析研究

评价中心技术是现代人事测评的一种主要形式,主要通过多种模拟任务来测评高级管理人才。然而,少有研究能证明它具有理想的结构效度。该研究运用多质多法分析了某金融企业一次真实的评价中心测评项目,发现测评的结构效度并不理想。接着,通过多元概化理论的分析,探讨了结构效度不理想的原因,并指出了评价中心任务与所测维度之间的关系,以及对各维度的测量信度。最后,根据分析结果,探讨了优化评价中心结构效度和提升整体测量信度的途径。

大学生网络成瘾量表(修订版)的多元概化分析

用多元概化理论考察大学生网络成瘾量表在大学生群体中应用的测量学性能。以随机测量模式的概化设计．针对1200名在校大学生进行问卷调查。结果显示双因子结构的相关程度在0．92以上，五因子结构的相关程度均在0．76-0．97间：整体量表的概化系数和可靠性指数均达到了0．94以上，而双因子结构各因子在0．90左右，五因子结构各因子均在0．74-0．85间。所以，整体量表及各因子在大学生群体中应用的信效度较高，可用作常模和标准参照测验：无论双因子还是五因子结构，CIAS—R各因子在分值比和项目数上，设计非常合理和完善。

认知行为实验研究中最佳素材容量的选择与确定:多元概化理论应用

心理学实验首先必须保证结果的有效性和可靠性。实验素材容量是影响实验结果的关键因素之一。本文的目的是通过运用多元概化理论分析几个典型认知行为实验的素材容量对实验结果精度的影响,从而探讨最佳的实验素材容量的确定问题。研究结果发现,在IAT测验上,相容与不相容任务的素材容量为50时最佳,可靠性指数为0.92;在图-词干扰范式中,素材容量以48时为最佳,可靠性指数为0.95;对线索提示范式,50%有效提示中,有效与无效提示最佳素材容量为35,可靠性指数是0.97。研究表明,多元概化理论可以很好地用于确定认知行为实验中素材的最佳容量。

多元概化理论在远程开放教育毕业生学习效果测评中的应用研究

现代远程教育的人才培养质量如何,这是社会各界及教育主管部门普遍关注的话题。本研究以全国电大系统的开放教育毕业生追踪调查(2004)数据为样本(N=15,602),运用多元概化理论和技术,对调查工具之一《电大学习效果评价表》的科学性和有效性进行验证。结果表明,《电大学习效果评价表》的测量精度比较高;从各维度对总方差的贡献比例的角度确定合成分数的权系数更科学;原评价表各维度的项目数量是比较合理的,但适当增加"业绩"的项目数量(6个),测量精度会比原始测量精度有所提高而且经济。

多元概化理论在后期临床技能考核中的应用研究

信度问题一直是人们所关注的焦点,它直接影响到考核的准确性及公平性。传统信度分析方法不能探查和分解各种误差来源,更难考察测量情景变化所引起的误差的相对变化,且对多变量的信度分析没有一个综合统一的评价指标,这给实际工作带来诸多不便。概化理论在解决一些测评情景比较复杂,影响因素较多,评分主观性较强的实际工作具有很大优势。医学临床技能考核属于测评情景比较复杂的考核,因此比较适合应用概化理论研究。

基于多元概化理论的中小学教师资格考试质量分析——以《综合素质》(中学)科目为例

教师资格考试是国家教育规划纲要确定的改革项目之一。本文运用多元概化理论对中小学教师资格考试笔试科目《综合素质》(中学)试卷的测量信度、试卷总分合成、试卷结构优化等问题进行探讨。研究发现:本次测试的测量信度较高,为0.707;各测量分项对全域总分的方差贡献比例与试卷赋分意图基本一致,除写作能力外,其余部分误差在7%以内;可以采取减少客观题数量,增加主观题数量的方式来提高信度。

基于多元概化理论的中小学教师资格考试数学学科试卷质量分析

中小学教师资格考试《数学学科知识与教学能力》科目,考查新入职中学数学教师所必需的学科知识与教育教学能力.应用多元概化理论对中小学教师资格考试中学数学学科试卷进行质量分析,以期为优化试卷结构、修订考试大纲提供参考依据,进而促进中学数学教师资格考试质量的提升.

多元概化理论在高等教育自学考试命题质量控制中的应用——以北京市《英语水平考试(一)笔试》为例

概化理论作为新一代测量理论逐渐应用于大规模考试领域。文章运用多元概化理论对自学考试课程《英语水平考试(一)笔试》试卷的测量信度、试卷总分合成、及格线决策信度、试卷结构优化等问题进行探讨。研究发现:本次考试的测量信度较高;各分测验对全域总分的方差贡献比例与试卷赋分意图基本一致;该试卷以60分作为及格线具有较高的决策信度;将各分测验题量同时增至15题或单独将词汇分测验题量增至20题,可有效提高测量信度。