难度分析,就是对题目的难度进行估计以确定适宜的难度。
1、通过率。难度的指标通常以通过率表示,即以答对或通过该题的人数百分比来表示:P=R/N*100
2、测验难度的确定。题目难度水平的确定究竟多高合适,依赖于测验的目的、性质和题目形式。
(1)从测验的目的考虑
(2)从测验的作用考虑
(3)从题目的形式考虑。对于是非题而言,其难度值应该为0.75最为合适;而对于四择一题目,难度值约为0.63时最为合适。
二、测量的项目鉴别度分析
项目鉴别度是指测验项目对于所测查的心理特性的鉴别能力和区分程度。鉴别度分析可以从项目效度和内部一致性两方面着手。
(一)项目效度分析主要以效标为依据,考察被试在每个试题上的反应与其在效标上表现的相关程度,即每个试题所测查的行为是否反映了被试在效标上的表现。
1、鉴别度指数,它比较效标得分高和得分低的两组被试在项目上通过率上的差值:D=PH-PL.D值是鉴别题目测量效标有效性的指标,D值越高,题目越有效。D值大于0.30时,题目就可以接受了。
(二)内部一致性分析
1、有时在进行项目分析时,难以找到合适的效标,这时可以采用测验的总分代替效标,考察每个试题和总分的一致性,即做项目-总分分析。
(三)项目效度与内部一致性的比较
1、项目效度代表题目与外在效标的关系,内部一致性则更多地代表题目与总分的关系。有较高的内部一致性的题目,并不一定与外在效标有很高相关。
2、那么空间选择何种鉴别度作为选择题目的依据更为合适呢?
(1)一般根据测验的目的确定。如果测验是预测性测验,则应该多采用项目效度较高的试题,这样,各个试题对预测外在效标都有较大的贡献;
(2)如果测验要求同质,即希望各个试题都测量同一特质,则应该选择内部一致性较高的题目。
(四)鉴别度的标准。
1、就成就测验而言,一般要求项目和总分的相关达到0.20以上,而鉴别度指数希望达到0.15~0.20以上。一般心理测验,D值在0.30以上就可以接受了。
三、测量的诱答分析
1、诱答分析是指系统考察测试题目,以诊断题目是否符合一系列测量学要求的过程,主要目的在于避免猜测的影响,使题目真正反映应试者的真实情况。
2、在设计诱答时,要注意避免两种情况:
第一,不要出现过于容易被排除的诱答,这会使不知道正确答案的被试猜测正确的概率提高;
第二,不要出现过于似真的选项,即欺骗性诱答。