3、样本团体的性质:与信度系数一样,其他条件相同,样本团体越同质,分数分布范围越小,测验效度就越低。对于不同性质的团体,由于年龄、性别、教育水平、智力、动机、兴趣、职业等特征的不同,同一测验的效度会有很大的不同,使得测验对不同的团体具有不同的预测能力,这些特征在测量学上被称为干涉变量。美国心理学家吉赛利(E.E.Ghiselli)提出了找出干涉变量的一套方法,①是用回归方程求得每个人的预测效标分数,将该分数与实际效标分数相比较,获得差异分数D。如果D的绝对值很大,说明测验中可能存在干涉变量。②是根据样本团体的组成分析,找出对照组,分别计算效度,找出干涉变量;③是对于欲测团体,根据某些易见的干涉变量将其区分为预测性高和预测性低的两个亚团体,对于预测性高的团体,获得的测验效度会有所提高。
4、效标的性质:效标测量的可靠性即效标测量的信度。
一般来说,项目分析包括定性分析、定量分析两个方面。定性分析包括考虑内容效度、题目编写的恰当性、有效性等;定量分析主要指对题目难度和区分度等进行分析。
一、项目难度
1、定义:难度指项目的难易程度。难度的指标通常用通过率表示,P=R/Nx100%。通过人数越多,P值越大,难度越低。在非能力测验(如人格测验)中,类似的指标是“通俗性”,计算方法相同。
2、计算方法:二分法,以各占27%的高分组和低分组的通过率的平均值作为每题的难度P=(PH+PL)/2;非二分法记分,P=(X--/Xmax)x100%,X--为全体受测者在该题上的平均分,Xmax为该题的满分。
3、难度水平的确定:项目的难度,对于选择题来说,P值一般应大于概率水平;测验的难度,如果受测者样本具有代表性,对于中等难度的测验,其测验总分应该接近常态分布。一般来说,最好使测验中所包含的试题的难度在0.50±0.20之间,平均难度接近0.50。
二、项目的区分度
1、定义:区分度(鉴别力),指测验项目对受测者的心理特性的区分能力。
2、计算方法:
鉴别指数,①按测验总分高低排列答卷;②确定高分组和低分组,每一组取答卷总数的27%;③分别计算高分组和低分组在该项目上的通过率或得分率;④按公式D=PH-PL估计项目的鉴别指数。1965年,美国测验专家伊贝尔根据长期的经验提出用鉴别指数来评价项目性能的标准,当D在0.19以下时,说明项目差,必须淘汰。
相关法:计算区分度最常用的方法。即以某一项目分数与效标成绩或测验总分的相关作为该项目区分度的指标。相关系数越大,区分度越高。区分度取值范围介于-1和+1之间。常用的方法有点二列相关、二列相关、Φ相关法等。
3、区分度与难度的关系
通常,较难的项目对高水平的受测者区分度高,较易的项目对低水平的受测者区分度高,中等难度的项目对中等水平的受测者区分度高。由于人的大多数心理特性呈正态分布,所以项目难度的分布也以常态分布为好,这样不仅能保证多数项目具有较高的区分度,而且可以保证整个测验对受测者具有较高的区分能力。
一、目标分析
1、对象:编制测验前,首先要明确测量的对象,也就是该测验编成后要用于哪些团体。只有对受测者的年龄、文化程度、社会经济状况、阅读水平等心中有数,编制测验时,才能有的放矢。
2、用途:一般来说,测验的用途包括描述、预测、诊断、选拔。可以分为两类,显示和预测。显示性测验指测验题目和所要测量的心理特征相似的测验。古德纳夫曾经将其分为样本测验和标记测验。预测性测验
3、心理测验的目标:指编制的测验是测什么的,即用来测量什么样的心理变量或行为特征。目标分析因测验不同而异,可分为:工作分析、对特定概念下定义、确定测验的具体内容。对于选拔和预测功用的预测性测验,它的主要任务就是要对所预测的行为活动作具体分析,我们称之为任务分析或工作分析。这种分析的具体步骤包括:①确定哪些心理特征和行为可以使要预测的活动达到成功;②建立衡量受测者是否成功的标准(效标)。
二、测题的编写(看完本段,再次倒地)
1、搜集资料:题目的来源,已出版的标准测验;理论和专家的经验;临床观察和记录。
2、命题原则:可从内容、文字、理解、社会敏感性四个方面考虑。
内容方面的要求:①题目内容符合测验目的;②避免贪多而乱出题目;③内容取样要有代表性;④题目间内容相互独立。
文字方面的要求:①使用准确的当代语言;②语句简明扼要;③排除与答案无关的因素;④最好一句话说明一个概念。
理解方面的要求:①题目应有确切的答案;②题目的内容不要超出受测受测团体的知识水平和理解能力;③题目不可令人费解;④不能有歧义。
有些测验必须涉及一些社会敏感性问题,菲力普提出的可供参考的策略包括:①命题时假设受测者具有某种行为;②命题时假设规范不一致;③指出该行为虽然是违规的,但却是常见的。
3、编制要领:①难度排列逐步上升,先易后难;②将同类型的测题组合在一起;③注意各种类型测题本身的特点。
选择题要编好题干,也要编好选项,必须注意:①题干问题明确,避免与选项用词一致;②选项简明扼要,长度相等;③每题只给一个正确答案;④选项最好用同一形式。
编制是非题时,应注意①内容以有意义的概念、事实或基本原则为基础;②每道题只能包含一个概念;③尽量避免使用否定的叙述、尤其是双重否定;④“是”“非”题的数目应基本相等,随机排列。
编制简答题时,应注意最好采用问句形式、填充形式的空格不宜太多、每题应只有一个正确答案。
编制操作测验的原则①有明确所要测量的目标,并将其操作化;②尽量选择逼真度较高的项目;③指导语要简明扼要;④制定评分标准,确定记分方法。
三、测验的编排和组织
1、合成测验
选择题目的形式时,需要考虑测验的目的、材料的性质、接受测验团体的特点、各种实际因素。
审定题目要注意题目的范围应与测验计划的双向细目表相一致、数量要比最后所需的数目多一倍至几倍、难度必须符合测验的目的、说明必须清楚明白。
测题常见的排列方式并列直进式、混合螺旋式。
2、测验的预试
预测应注意:对象应取自将来正式测验准备应用的群体;实施过程与情境应力求与将来正式测验时的情况相近似;时限可稍宽一些,最好使每个受测者都能将题目做完;预测过程中,随时记录受测者的反应情形。(205题,全选)。
3、信度和效度考察
4、常模制定
5、编写指导手册
测验指导手册的内容有测验的目的和功用;编制的理论背景、选材的原则、方法;实施测验的说明、测验的记分标准;测验的基本特征、常模资料。(206题,全选)。
一、主测者的资格
1、知识结构:指开展心理测验工作所必须具备的心理学基础知识和心理学、本专业的专业知识。
2、专业理论知识和专业技能
主测者的心理专业理论知识包括对心理测验的特点和性质、作用和局限性的认识;了解测验的基本特征,如信度、效度、难度、区分度等,熟悉心理测量标准化的必要性等。(208全选题)
主测者必须具有实际操作心理测验的专业技能和经验,接受严格、系统的心理测验专业训练,熟悉有关测验的