07年自考“人事测量”串讲资料（5）

三、测试题的预测试和分析

◎预备测试题：测试题编排完成并不意味着这项测量工具的编制就此完成。前面对题目的选取只是依靠编写者的主观经验，题目的效果如何还需要进行定量的客观分析。这时的测试题还只能叫做预备测试题，还需要获取被试对这些题目的反应的材料，为进一步筛选题目和为编排测量工具提供客观依据。

◎预测试：必须将预备测试题对一定规模的小样本被试进行施测，获得数据以进行校验、修订。这一过程称为测试题的预测试。

◎题目分析：测验数据收集上来之后，应该利用这些数据对题目进行分析，删除不好的题目或对题目进行修改，这个过程称为题目分析。具体内容包括对题目的项目分析和对测验信度、效度指标的检查。

对测试题的预测试应注意以下问题：⑴预测试对象必须和将来正式测试的对象相似；⑵预测试的实施过程与情境应力求与将来正式测量工具实施时的情境相似；⑶预测试的时限可稍宽些，最好使每个被试都能将题目答完，以便搜集充分的反应资料，使统计分析的结果更为可靠；⑷在预测试过程中，应将被试的各种反映情况随时加以记录。如，记录在不同时限内一般被试所完成的题目数、题意不清之处、被试的态度等，以便在在修改测验时作为参考。

预测试完成后，可以根据预测结果进行题目分析，对每个题目的具体分析称为项目分析，主要是指根据题目的难度、区分度、备选答案的合适度等数量指标来对题目进行分析。

2.☆被试特点对测量结果的影响：

⑴测验的技巧与练习因素。◎练习效应：有不少研究发现，应试者参加相同或重复的测验，会由于练习效应而使测验成绩提高。

⑵焦虑和动机因素。①应试动机；②测验焦虑。◎焦虑是一种不愉快的、表现为焦急、恐惧和紧张的情绪体验，它主要是由于对可能出现的结果的担心或对应付这一结果的能力的担心而造成。大多数人都在测验前和测验中感到焦虑，故又称测验焦虑或考试焦虑。

⑶反应定势。◎反应定势也成为反应的方式或反应风格，简单地说，就是每个人回答问题的习惯方式。

☆影响测量结果的反应定势主要有以下几种：①求“快”与求“精确”的反应定势。②偏好正面叙述的反应定势，又成为肯定反应定势，克伦巴赫发现。③偏好特殊位置的反应定势。吉尔福特认为，被试如果完全不知道选择题的正确答案，则不会以完全随机的方式来决定该选择哪一个选项，而有偏好某一个位置的选项的倾向，而有些测验编制者也存在偏好某个位置的反应定势，这些现象称为位置定势。④偏好较长选项的反应定势。⑤猜测的反应定势。

四、猜测的校正

1.★猜测修正的公式：S=R-W/（n-1），其中，S是正确分数；R为被试答对的题目数；W为被试答错的题目数；n为选项数目。

2.☆猜测修正的优缺点。优点：⑴修正公式可避免减低测验的信度。⑵修正公式可以反映被试真正的能力和水平。⑶使用修正公式对那些不能答完全部试题的被试来说比较公平。

缺点：⑴公式假设不成立，因为被试答错试题，并非完全瞎猜。⑵猜测修正无实质作用。⑶未采用猜测修正对信度并无重大影响。⑷完全不许猜测与实际生活不符。

第二节实施测量计分的要领与误差控制

检验客观与否，可以以两个或两个以上受过训练的合格评分者所评结果之间的一致性作为指标。一般情况下，受过训练的评分者之间的平均一致性达到90%以上，我们就认为计分是客观的。

一、计分的一般程序

1.◆☆计分的基本步骤：⑴记录反应。及时和清楚地记录被试的反应。⑵检索标准答案。标准答案有时又称计分键。⑶反应和标准答案的比较。

2.◇问答题的主要缺点是评分不够客观，也就是说问答题的计分经常受到评分者的情感、态度的影响。问答题中常见的误差有：宽容定势和晕轮效应。

3.◎宽容定势：指主试的计分过于宽松，即使没有回答出题目所要求的答案，评分者也给予较高的分数。

4.◎晕轮效应：指给予被试某道题较高分数仅仅是由于被试在另外一些试题上获得了高分，也就是说对被试的一般印象影响到具体某个问题的评价。

5.◎整体计分：就是评分者根据总体印象给答案评一个总分。整体计分在实际中应用较为普遍。

6.◎分析计分：是给问答题的不同部分分派不同的权数，按照各部分的要求对答案中所包括的信息和技能评分，最后将各部分的权数和得分组合起来得到该问答题的分数。

比较整体计分和分析计分？（回答上面的名词，再加以说明）

7.◇客观题的一个主要优点就是计分简单、客观。

8.不同的反应依据主试认为的重要性不同也可以给予不同的权数，我们还可以根据被试回答问题时的确定程度给予不同的权数，这叫做“信心权数”◎。

第六章 人事测量结果的解释

人事测量的解释不同于测量实施本身，它们是测量中两个不同的、相对独立的成分。测量的解释是一个相当复杂的系统程序。