第十六章项目分析与信度估计1/16☆量化研究與統計分析…….第十六章第十六章项目分析与信度估计项目分析与信度估计ItemAnalysisandReliabilityEstimationItemAnalysisandReliabilityEstimation第十六章项目分析与信度估计2/16☆量化研究與統計分析…….课程目标•了解项目分析的目的•了解项目分析的技术•了解信度的概念与估计方法第十六章项目分析与信度估计3/16☆量化研究與統計分析…….项目分析的目的•确认量表题目的堪用程度•测验的内容修改增减的依据•测验题目的先期检验•整体测量信效度的基础第十六章项目分析与信度估计4/16☆量化研究與統計分析…….项目分析的方法•质的分析–着重于测验项目的内容与形式的适切性的讨论–检验方法多为非计量的方式，例如专家评量、内容效度的评估等等•量的分析–利用各种计量模型与统计方法来检验量表题目优劣–教育测验当中，测验的目的多在评估与诊断，因此重视项目难度与鉴别度检验–其他用于测量受试者心理特质或态度的强度之心理测验（如人格测验与态度量表），因为题目的型态是连续型的变项，可以从各种量化的指标来检验项目的适切性。第十六章项目分析与信度估计5/16☆量化研究與統計分析…….测验题目的基本特性•项目难度（itemdifficulty）–指一个测验的试题对于受测者的能力水平的反应能力。–主要适用于能力测验或教育测验的项目评估，因为测验的题目是用来判定能力的强弱，每一个题目都有正确与否两种答案。–项目难度提供测验项目如何安排的一个操作性原则与决策依据•项目鉴别度（itemdiscrimination）–反应测验题目能够正确测得受测特质的内容的程度，并能够鉴别个别差异的能力。–项目鉴别度则反应测验项目的有效性，可以说个别测验题目的项目效度（itemvalidity）指标。第十六章项目分析与信度估计6/16☆量化研究與統計分析…….项目难度的评估•通过人数百分比（percentagepassing;p)–越高的百分比（p值越大），表示题目越简单–p=.7代表有百分之七十的受测者可以正确答对该题(通过)–p=.2代表只有百分之二十的受测者可以正确答对该题，是一个比较简单的题目。•试题难度的安排–个别测验题目的难度以.5为宜，此时约有一半的受测者可以正确回答该题，有一半的受测者无法回答该题。–整个测验的题目难度应保持相当之异质性，使测验得分具有适当的变异，以反应受测者的能力差异。–猜中率的校正，使全量表的平均难度改变第十六章项目分析与信度估计7/16☆量化研究與統計分析…….项目难度系数的特性•P系数–通过率的数值是一个顺序尺度–不同的p值之间并不具有等距或比率的关系•△（delta）难度系数–△=13+4Z–△为标准分数,分数介于1-25,mean=13–△越大，难度越高，答对的人越少；越小，难度越低，答对的人越多。第十六章项目分析与信度估计8/16☆量化研究與統計分析…….不同难度测验得分的分布情形p=.2p=.5p=.8p=.2p=.5p=.8第十六章项目分析与信度估计9/16☆量化研究與統計分析…….项目鉴别度•指一个题目能够正确的鉴别出受测者在某一个心理特质或行为倾向上的个别差异的程度–特定效标比较：项目效度（itemvalidity）的考验–相关性检验：测验项目间的一致程度（internalconsistency）第十六章项目分析与信度估计10/16☆量化研究與統計分析…….项目效度的建立•效标关连效度（criterion-relatedvalidation）–适用于人格测验与态度测量等非认知测厌–重点在于效标的选择•实验操弄法–比较有无接受特定训练指导下的受测者在每一个项目上的得分状况–适用于认知与能力测验•极端组比较法–利用具有特殊属性的受测者在各题通过率的差异来判断–极端组的决定：效标的决定•内部效标法：分组标准来自内部变项•外部效标法：分组标准来自外部变项第十六章项目分析与信度估计11/16☆量化研究與統計分析…….鉴别指数（theindexofdiscrimination）•鉴别度D值–适用于成就测验或能力测验–两个极端组的得分情形换算成通过人数（答对者）百分比。–D=pH-pL–D值是一个介于100到-100的数值，正常D值介于0-100.项目难度为中等（p=.5）可获得最大D值100–D值越高，鉴别度越高:D值为负值表示反向题或有问题的题...
