十、心理测验质量指标 Flashcards
信度的定义
测验结果的稳定性、一致性程度。
⒈一个被测团体的真分数的变异数与实得分数的变异数之比。
⒉一个被试团体的真分数与实得分数的相关系数的平方。
⒊一个测验与其任意一个平行测验的相关系数。
此外，描述测量一致性程度的指标还有信度指数，即信度系数的平方根。
效度的定义
- 一个测验能否测出其所要测量的心理特质，和准确测量到这种特质的程度。
❶效度是一个相对的概念。
❷效度是测量的随机误差与系统误差的综合反映。
❸判断一个测量是否有效要从多方面收集证据。 - 在测量理论中，效度被定义为：在一系列测量中，与测最目的有关的真实变异数(有效变异)与总变异(实得变异)的比率，即由所测量的特性造成的变异所占的比例。效度r²xy ≠ 效度系数rxy。
信度的作用
⒈反映测量过程中所存在的随机误差的大小。
⒉解释个人测验分数的意义，即通过区间估计指出测量的精确度，Se=Sx√1-rxx‘（测量中误差大小的指标）。
⒊帮助比较不同测验分数，Sed=S√2-rxx-ryy（差异的标准误差）。
心理测验的编制程序
tips：目的计划俩项目，合成标准鉴定书(8步骤)
❶确定测验目的：明确测量对象、确定测量目标、明确测量用途（描述性、诊断性）。
❷制订编题计划：明确测验的内容，使内容全面而具有代表性，并明确各个内容的相对重要性。
❸编辑测验项目：收集测验资料（丰富、普遍、有趣味）；选择测验项目形式（简答论文题等）；编写测验项目（对照双向细目表）。
❹预测与项目分析：预测对象有代表性，预测情境要和正式实测时一致；之后，对项目的难度、区分度等进行分析。
❺合成測验：完成测试项目的选择、编排（并列直进式、混合螺旋式）及复本的编制。
❻测验的标准化：测验的编制、施测、评分及解释测验分数的程序的一致性。
❼鉴定测验：鉴定测验的信度、效度、测验量表及常模。
❽编写测验说明书：向测验使用者说明如何使用该测验，以保证测验的信度和效度。
信度的影响因素与改进
▪️影响因素
- 主试方面：主试不按规定施测；评分者评分标准掌握不一。
- 被试方面：个体被试的心理特质水平的稳定性：团体的同质性水平。
- 测量工具方面：测量工具是否稳定、试题取样、试题难度、测验长度、试题之间的同质性程度。
- 施测过程方面：考场是否安静、光线和通风是否良好、设备是否齐全、桌面是否合乎要求；另外，在计算稳定性系数及稳定性与等值性系数时，两次测验间隔时间越短，信度越高。
▪️改进方法
- 主试方面：主试严格执行实测规程，评分者严格按标准给分。
- 被试方面：选取恰当的被试因体，提高测验在各同质性较强的亚团体上的信度。
- 测量工具方面：适当增加测验长；使所有题目难度接近正态分布，并控制在中等水平；努力提高题目的区分度。
- 施测过程方面：按测验手册的要求布置场地，减少无关因素的干扰。
效度的影响因素与改进
▪️影响因素
- 主试方面：不遵守指导语，评分、计分出错会降低效度。
- 被试方面：个体的身心状态；团体的同质性，团体需要有必要的同质性。
- 测量工具方面：测验题目缺乏代表性、指导语不明、题目语义不清、难度过难或过易都会降低效度。另外，测验的长度也会影响效度。p348
- 施测过程方面：出现意外干扰。
- 测验的信度以及效标的选取：信度不高的测验不可能具有很高的效度；测量行为与所选效标相似性越高，效度越高；另外，还需考虑测验分数和效标之间是否有线性关系等问题，以选择正确的相关关系的计算公式。
▪️改进方法
- 主试方面：主试严格执行施测规程，评分者要严格按标准给分。
- 被试方面：创设标准的应试情境，让每个被试都能发择正常水平；选取具有一定同质性的团体
- 测量工具方面：精心编制测验量表，避免出现较大的系统误差。
- 施测过程方面：妥善组织测验，控制随机误差。
- 其他方面：保证测验的信度，选好正确的效标，正确地使用有关公式。
误差的来源及控制
（简述心理测量误差的主要来源。2021）
在测量过程中由那些与测验目的无关的变化因素所产生的一种不准确或不一致的测量效应。包括：
❶随机误差：…偶然因素引起而不易控制的误差。既影响稳定性，也影响准确性。
❷系统误差：…一种恒定有规律的效应。不影响稳定性，但影响准确性。
信度系数的估计
效度的估计
（“效度的类型”2018年简答题）
分半信度
斯皮尔曼-布朗公式：
rxx = 2rhh/ 1+rhh
rhh 为两半测验分数间的相关系数
rxx为整个测验的信度值
