分类是认知诊断评估的一个核心问题。基于观察反应模式与理想反应模式之间的距离的判别方法,以确定性的理想反应模式为类中心,而这没有考虑误差,故未充分利用总体分布信息。为了更充分地利用总体分布信息、提高诊断分...
非参数认知诊断分类方法非常适合课堂评估,其诊断结果采用0-1形式而缺乏概率化表征,不能精细地区分被试属性掌握程度的差异或变化,还缺乏可用于评价真实测验分类结果的信度和效度指标。要刻画被试属性掌握程度的差异,...
认知诊断评估的主要问题是如何准确进行被试分类和项目属性标定。本文使用概率神经网络(PNN)和支持向量机(SVM)进行被试分类和属性标定,重点讨论PNN用于诊断的理论根据。模拟研究表明:PNN方法表现最好,训练速度快且具...
认知诊断测验项目开发成本较高,要标定大量项目的属性相当费时费力,专家完成这一任务也比较困难。对于在计算机化自适应诊断测验中的项目属性的标定尚未见到报导。在已有的为诊断测验开发的小型题库基础上,本文在计算...
关键词: 计算机化自适应诊断测验 / 在线属性向量标定 / MMLE / DINA模型
下载(772)| 被引(43)
Bootstrap区间估计在认知诊断模型误设中的应用 CNKI文献
本研究提出综合考虑模型拟合指标与信度指标用于模型选择或评价模型误设,在五因素(3×3×2×2×2)实验设计条件下,比较Bootstrap区间估计的属性分类一致性信度平均数与标准误和常用的拟合统计量-2LL、...
关键词: 属性分类一致性信度 / 区间估计 / Bootstrap法 / 认知诊断模型误设
下载(357)| 被引(1)
引入了三种估计认知诊断属性分类一致性信度置信区间的方法:Bootstrap法、平行测验法和平行测验配对法。用模拟研究验证和比较了这三种方法的表现,结果发现,平行测验法和Bootstrap法在被试量较少、题目数量较少的情况...
关键词: 属性分类一致性信度 / 区间估计Bootstrap法 / 平行测验法 / 平行测验配对法
下载(322)| 被引(6)
考试不公平将影响被试受教育机会的公平性和社会公平性.针对我国考试公平性中统计分析长期被忽视问题,该文主要从统计测量视角,在介绍测验公平性评价在国外盛行情况之后,深入剖析测验公平性统计分析的项目功能差异方法...
Q矩阵标定是实施认知诊断评估的前提,已有Q矩阵修正方法并不太适合测验中已知属性向量的题目数较少的情形。根据拓展Q矩阵理论中可达阵R列与简化Q阵列存在布尔"或"关系,在一定认知假设下,率先提出可达阵R与...
兼顾测验效率和题库使用率的CD-CAT选题策略 CNKI文献
CD–CAT中已有选题策略较注重测验效率,而对题库使用率不够重视。针对此问题,基于DINA模型,引入两种新的选题策略KLED和RHA,同时对HA进行模拟研究。结果显示:PWKL与KLED只在测验效率上具有优势;KLED若按属性向量分层,...
关键词: 计算机化自适应认知诊断测验 / 选题策略 / 题库使用率 / 二分法
下载(466)| 被引(20)
双题匹配的MPI方法及其在平行试卷生成中的应用 CNKI文献
大规模考试的公平性备受关注,探索能够生成多份平行测验并能保证测验质量的组卷方法十分重要.原用于计算机自适应测验(CAT)的基于最大优先级指标已开始用于组卷,但只局限于单题之间的匹配.为了增加求解空间,该文提出了...
在认知诊断中还没有指标能在无作答数据情况下直接评价项目的属性分类准确率或属性判准率。项目水平上的属性分类准确率,与项目属性向量、项目参数、先验分布和作答反应等有关。综合各个影响因素定义了项目水平上的属...
关键词: 分类准确率 / 项目属性期望分类准确率 / 组卷 / 确定性输入噪音与门模型
下载(356)| 被引(4)
复杂决策规则下MIRT的分类准确性和分类一致性 CNKI文献
介绍多维项目反应理论模型下分类准确性和分类一致性指标,采用蒙特卡罗方法实现复杂决策规则下指标计算,并从数学上证明分类准确性指标两类估计量在均匀先验和相同决策规则条件下依概率收敛于同一真值。研究结果表明:...
标定Q矩阵是认知诊断评估中最基本也是最为关键的一步.如今Q矩阵标定的统计方法,多数为验证性方法,即验证或修正已有Q矩阵中元素的方法.在常见的Q矩阵未知和已有作答数据情形下,提出将探索性因素分析方法和验证性方法...
分类一致性和分类准确性是衡量考试信效度的两个重要评价指标。基于项目反应理论下分类一致性和分类准确性指标,提出认知诊断测验的属性(模式)分类一致性和分类准确性指标,讨论分类一致性指标、分类准确性指标与属性估...
计算机化自适应测验(CAT)中具有智能的部分是选题策略,选题策略是CAT研究中最重要的部分。按CAT的功能来分,至少可以分为传统CAT与具有诊断功能的CAT。本文对传统CAT的选题策略和具有认知诊断功能的CAT的选题策略分别...
信度和效度是衡量一个测量工具质量的关键指标,教育认知诊断测验中的信度和效度研究近年来受到研究者的关注。诊断测验的信度系数基本上源自基于α系数的属性信度系数、经验属性信度系数、四分相关系数、模拟重测一致...
近来,结合认知科学和心理计量学的认知诊断评估,越来越受到国内外研究者的关注。大多数认知诊断评估以Q矩阵为基础,Q矩阵是认知诊断评估与传统项目反应理论之间最主要的区别。认知诊断评估是通过Q矩阵表达项目和属...
汪文义 导师:丁树良 江西师范大学 2012-05-01 博士论文
关键词: 形式概念分析 / 属性辅助标定方法 / 确定性输入噪音与门模型 / 修正的Q矩阵理论
下载(444)| 被引(6)
项目反应理论(IRT)是用于客观测量的现代教育与心理测量理论之一,广泛用于缺失数据十分常见的大尺度测验分析。IRT中两参数逻辑斯蒂克模型(2PLM)下仅有完全随机缺失机制下缺失反应和缺失能力处理的EM算法。本研究推导...
在认知诊断评估中,评价认知模型与作答数据的拟合非常重要。已有的层级相合性指标(HCI)仅能用于评价连接规则下模型与数据的拟合情况,有必要研究分离规则下相合性指标。HCI假设某项目上正确作答,便推断其子项目上的错...
考虑到在实际应用中学生在做题时的猜测和失误(统称为噪音)会影响探索性因素分析法所使用的四分相关矩阵的质量,该文提出四分相关矩阵的一种噪音修正方法,并将其应用于Q矩阵标定.模拟研究结果表明:猜测和失误这2种噪音...