测验的项目分析 Flashcards

1
Q

测验项目的难度(高频考点)

(一)难度的计算

A

(1)通过率

R

通过率是指通过一个项目的人数的百分比:P=

以通过率表示项目难度时,通过人数越多,P值越大,其难度越小,题目越容易:通过人数越

少,P值越小,其难度越大,题目越难。所以P值也称为容易度。

(2)极端分组法

当被试人数较多时可以分为三组,取总分最高的和最低的27%分别为高分组和低分组,并分别

计算通过率,最后求两个通过率的平均值作为该项目的难度系数。

2.非二分法记分项目的难度

苁学简快

用该项目上的平均得分除以项目的满分来计算难度:

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
2
Q

测验项目的难度(高频考点)

(二)难度水平的确定

A

理考不二之选

性质。

进行难度分析主要是为了筛选项目,项目的难度水平多高才合适,取决于测验的目的与测验的

  1. 对于常模参照测验,项目的难度系数应尽量接近0.50,以尽可能地区分被试的个体差异;
  2. 对于标准参照测验和掌握测验,不必过多地考虑难度;
  3. 对于选拔和录取测验,测验的项目难度应接近录取率;
  4. 对于选择题,难度应该大于猜测概率;
  5. 对于速度测验,难度不宜太高且每一个项目的难度应基本相等;对于难度测验,要求难度控制在
  6. 50左右。对于这两种测验,要防止被试得满分因为满分的意义是不明确的。
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
3
Q

测验项目的难度

(三)难度对测验的影响

A

1.测验难度影响测验分数的分布形态

众学简快网校www. www.ikclass.cncn

若测验项目难度普遍较大,被试的得分普遍较低,则测验分数集中在低分端,其分数分布呈现

正偏态;若测验项目的难度普遍较小,被试的得分普遍较高,则测验分数集中在高分端,分数分布

呈现负偏态。

2.测验难度影响测验分数的离散程度

过难或过易的测验,会使测验分数相对集中在低分端或高分端,从而使得分数的全距缩小

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
4
Q

测验项目的区分度(高频考点)

(一)区分度及其计算

A

1.含义

区分度是指测验项目对被试心理品质水平差异的区分能力。具有良好区分度的项目,能将不同

水平的被试区分开来,即在该项目上水平高的被试得分高,水平低的被试得分低。所以试题的区分

度被称为测验是否有效度的“指示器”,并作为评价项目质量、筛选项目的主要指标与依据

区分度D的取值范围介于一1.00至+1.00。D为正值,称作积极区分D为负值,称作消极

区分:D为0,称作无区分作用。具有积极区分作用的项目,其D值越大,区分的效果越好。

  1. 区分度的计算
    (1) 项目鉴别指数法:这种方法比较适合于三分法记分的测验项目D=P=D若大于0.4,

方研

则说明题目质量较好。

(2)相关法:以项目分数与效标分数或测验总分的相关作为项目区分度的指标,相关越高,项目区

①点二列相关。适用项目是0、1记分(或二分变量),而效标或测验总分是连续变量的数量资料。

分度越高。

②二列相关。适用于连续的测量变量,但其中一个变量因为某种原因被人为地分成两类。

③φ相关。适用于两个变量是二点分配的资料,即两个变量都是二分名义变量。相关不要求变量

④积差相关。对于论文式测验题目,因得分具有连续性,在被试团体较大时,可以认为项目分数服

呈正态分布。

从正态分布。可用项目得分与效标分数求积差相关系数以得到项目的区分度。但如此计算得到的

区分度,如果效标采用的是测验总分,则区分度值的大小受该项目分值大小的影响。项目分值越大,

果其区分度值就越高。

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
5
Q

测验项目的区分度(高频考点)

(二)区分度与难度的关系

A

难度越接近0.50时,项目的潜在区分度越大,而难度越接近于1.00或者0时,项目的潜区

分度越小。但如果测验的所有项目都是中等难度,只有在项目的内在相关为0时,整个测验分数大

产生正态分布。所以选择试题时应使项目的难度分布呈正态分布,且平均水平保持在0.5左右,才

能把各种水平的人区分开来。

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
6
Q

测验项目的区分度(高频考点)

(三)区分度的相对性

A
  1. 不同的计算方法,所得的区分度值不同。
  2. 样本容量大小影响相关法区分度值的大小。
  3. 分组标准影响鉴别指数值(D)

4被试样本的同质性程度影响区分度值的大小

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
7
Q

猜测问题与猜测率

(一)猜测校正的性质与公式

A

在选择题测验中,猜测的成功概率受项目备选答案数目)的影响(备选答案数

目越少,机遇的作用越大,被试的得分将越高于他们的真实水平。为平衡机遇对难度的影响,可采

用下式来对难度进行校正

心理学考

CP=

KP-

研不二之选

式中,CP为校正后

K-1

的通过率,P为实际通过率

上述公式可变式为:

K为备选答案数目。

S=R-_

W

K

1

对某个被试,多个项目组成的测验

式中,S为校正后的得分,R为被试答对的项目数,W为被试答错的项目数,K为项目的选

项数目。

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
8
Q

猜测问题与猜测率

(二)猜测校正的优缺点

A
  1. 优点
    (1) 通过猜测校正可避免降低测验的信度。若不使用校正公式,被试必然会盲目猜测而影响信度

如果答错倒扣分数,则被试不敢盲目猜测。

(2)校正后的得分可以反映被试的真正水平和能力。对每个项目来说,校正后可以反映项目的真实

难度,便于备选答案数目的统计比较分析

(3) 在教育测验中,可以培养被试诚实的美德
(4) 比较公平。即使事前鼓励学生答完所有试题,但事实上总有人无法完成,所以使用猜测校正的

方式比较公平。

  1. 缺点
    (1) 公式的基本假设不成立,也没有具体的实验研究对公式的有效性提供支持。
    (2) 只要被试能答完全部试题,猜测校正就无实质性作用。
    (3) 不采用猜测校正对信度并无重大影响。
    (4) 有时会出现无法解释的现象。如答对题数等于或少于答错题数,校正后就会得到零分或者负分
    (5) 在实际生活中,由于经常缺乏充分的证据与资料学生必须凭借部分知识来判断,且进行合理

猜测,这是值得培养的好习惯。如果对猜错作校正,则无异于扼杀考生的创造性思维与创新能力

How well did you know this?
1
Not at all
2
3
4
5
Perfectly
9
Q

多重选择题项目分析

A

对多重选择题作项目分析的具体步骤为

学简快

  1. 按被试测验的总分,从高到低依次排列试卷;
  2. 从最高分依次向下取全部试卷的27%作为高分组;

学考研不二之选

  1. 从最低分依次向上取全部试卷的27%作为低分组;
  2. 分别登记高分组与低分组选中各选择项的人数(亦可将人数换为人数比例)
  3. 根据登记结果进行选择项的质量分析
How well did you know this?
1
Not at all
2
3
4
5
Perfectly
10
Q

项目功能差异分析

A

1.项目功能差异的概念(第四版P94)

在统计学中,人们用“项目功能差异”(DIF)来示两组被试在某项目上的表现差异,以此代

替易于引起误解的“项目偏差”。项目功能差异仅仅指项目对于不同被试有着不同的统计特性,并

不含有是否公平等评价的含义。

  1. 项目功能差异分析的基本步骤
    (1) 分析数据的准备
    (2) 准备性分析
    (3) 探索性分析:
    (4) 差异根源分析
  2. 项目功能差异分析的检测方法
    (1) 方差分析法

运用方差分析法进行DIF分析的前提是不同团体在欲测量的某潜在特质水平上是相同的。方差

分析的具体方法是运用单因素方差分析的方法,对测验总分水平基本相同的不同群体在某项目上的

得分进行统计比较检验,以判断DIF是否存在。如果方差分析结果发现不同群体在该项目上的得分

具有显著性差异,就认为该项目存在DIF。这种分析方法可适用于多级计分题或主观测验题。

(2)项目难度比较法

项目难度比较法是按项目通过率求出项目难度值P,在假定被试特质水平呈正态分布的条件下,

可按照公式△=13+4Z,将难度值P转化成△值。同一项目在两个子群体上可分别求出各自的△

值,将测验所含项目的成对△值作为一个点在直角坐标系上描出,即可得到项目难度散点图将

条直线对散点图进行拟合,以拟合直线作为散点图的主轴,当项目难度值点偏离主轴过大时,即可

视该项目存在DIF。项目难度比较法适合于二分法记分(即0、1记分)项目。

3)x2检验法

心理学考研不二之选

x2检验(卡方检验)的具体技术是,先将测验总分划分为若区间段(假设分为K个区间),

在每个区间段内,对不同子群体在某个测验项目上回答的状况(如答对的人数或比例)进行比较,

检验不同子群体的答对比例是否具有显著差异,以此判断该项目是否存在DIF

(4)项目反应理论方法

使用项目反应理论考察项目是否存在DIF的基本思想是,对于具有相同潜在特质分数的被试,

没有测量偏差的项目对两个子群体的所有成员具有相同的难度,于是变异的无关来源就以同样方式

影响这两个子群体。此时对每组被试来说,测量的是相同的潜在特质,两个子群体的项目特征曲线

就应该是相同的。如果不同的子群体在每个项目上的项目特征曲线存在显著差异,则可以判定该项

目是有偏差的,即认为存在DIF。

How well did you know this?
1
Not at all
2
3
4
5
Perfectly