《心理测量原理》2018心理辅修班Lxling
B. 得出同一组被试两次测验的分数 C. 进行皮尔逊积差相关系数的分析,当相关系数较大时,说明前后两次测量的结果比较一致,测量工具比较稳定,被试的心理特质受被试状态和环境变化的影响较小。
量表测验被试——间隔一段时间——同一量表第二次测验相同被试——两次测验结果一致性比较
内在一致性信度(同质性信度)
含义:测验内部所有题目间的一致性程度(一个测验所测内容或者特质的相同程度) 评估步骤:
A. 同一个测验测一次
B. 用α系数进行评估,系数越高,一致性越好 4、试述提高测量信度的方法?
减少误差角度(或误差的来源)来看 三个误差来源:
(1) 测验本身:可以增加项目(测验长度);项目难度接近正态;提高项目的区分度;
取样:根据测验目的选择被试
A. 重测信度:题目简单明了,有确定的含义(没有歧义)。时间间隔不要太长 B. 内在一致性信度:注意项目在反映内在概念上的一致性 (2) 测验情境、主试,过程是否规范 (3) 被试状态
第四个因素:样本(测量):有代表性,即能反映总体;有足够的样本容量
五、效度——心理测量原理之二 (3)
? 重要概念 1. 效度:指测量工具的有效性、准确性,或反映真实值的程度 ..2. 内容效度:指一个测验内容是否合适,一般相对于教材或大纲,一般用来判断范围和..
题目是否恰当(仅限于成就测验,或知识与技能测验)
课本:一个测验实际测到的内容与所要测量的内容之间的吻合程度 3. 表面效度:外行人从表面上看,认为某个测验测得某种心理特质的有效程度 ..4. 效标关联效度(实证效度) ..
课本:一个测验对于处于特定情境中的个体的行为进行估计的有效性。(即用实践效果作为测验是否有效的检验标准) 老师:as instrumental validity, is used to demonstrate the accuracy of a measure or procedure by comparing it with another measure or procedure which has been demonstrated to be valid.(自己翻译的:与其他已经被证明有效的测量工具或者测量过程相比,测验的关联程度。) 5. 预测效度:根据有关理论(或研究成果,或一般推理)所选效标与待研究的测验(特..
质)有联系,如IQ与学习成绩,个性与心理健康 6. 同时效度:所选效标与待研究的测验(特质)内涵相同或相似 ..7. 结构效度:指通过对实证数据分析(因素分析)得到的一个测验(或问卷)实际结构..
是否清晰。或者说,一个测验的实证结构与理论预期的结构是否相符合的程度。
? 思考题: 1. 试述效度与测量误差的关系? ..
效度是测量的随机误差和系统误差的综合反映P60
(1) 当一个实验随机误差较大时,实测结果当然会偏离真值,造成结果的不准确。 (2) 如果测量中还存在系统误差,则系统误差也会加大测量误差。
(3) 无论出现哪种情况,也无论是否两种误差都存在,只要出现测量误差,测量的效度
必受影响。 相关计算公式:
6
《心理测量原理》2018心理辅修班Lxling
? S2X =S2v + S2I+ S2E(S2I为系统误差, S2E为随机误差) ? r2xy= S2v/S2X (r2xy为效度)
2. 试述度效标关联效度(实证效度)的含义? ..
也被称为工具的有效性,是用来表现出比较另一项措施或程序,已被证明是有效的资讯科技的一项措施或程序的准确性。 3. 试述效标关联效度(实证效度)的评估步骤? ..
三种研究设计:都是相关法,本质上是一致的 其实是分类、连续的数据的相关(参考区分度) (1)相关法
找一个效标(测验),对同一批被试,同时施测,得到两组数据; 求相关系数r,相关系数较大(>0.3)且显著为效度较好。 (2)比较法
其中一个变量为类型(0、1)变量;
找一个效标,根据经验进行分组,如高分组与低分组;
对新编制的测验进行测定,获得两组被试的平均数与标准差; 进行平均数差异比较(t检验或F检验),差异显著为效度较好; 也可直接求相关r。 (3)命中率
只是两个变量均为(0、1)类型变量,其中另一个变量是效标; 可用X2检验,也可用一般相关;还可用ROC曲线法。 4. 结合测验编制,谈谈结构效度对于一个测验的意义? ..
1)结构效度的含义: 结构的两重含义:
a) 结构:即变量——结构效度1 b) 结构:即理论——结构效度2 2)结构效度的含义:
a) 结构效度1:新编制的测验能不能测某一结构(或特质)(实际上是效标关联效度,
参前面的聚合效度与区分效度)---实质上是校标关联效度
b) 结构效度2:测验的结构与理论预期的结构是否符合 3)结构效度主要用于智力测验、人格测验等心理测验方面
4)心理测验编制在制定编题计划(内容构思)要进行理论建构:即明确待编制量表的内容结构
六、测验研究中研究设计
? 重要概念
1、 正规化:测验研究,即量表的正规化,是指在量表编制完成后,对量表进行结构、
效度、信度检验,确保量表结构清晰、有效、且稳定(不受无关因素影响)。
2、 标准化:测验标准化特指测试实施过程中的标准化,包括测验指导语、实施环境与
时限,评分标准的统一化。
3、 随机分层抽样:它是从一个可以分成不同子总体(或称为层)的总体中,按规定的
比例从不同层中随机抽取样品(个体)的方法。。
4、随机整群抽样:将总体按一定标准划分成群或集体,以群或集体为单位按随机的原
则从总体中抽取若干群或集体,作为总体的样本,并对抽中的各群中每一个单位都进行实际调查。 ? 思考题: 1. 试述测验标准化的内容 ..
7
《心理测量原理》2018心理辅修班Lxling
1) 内容标准化:即对所有被试施测相同的题目。测验的内容不同,所得的测验分数是无法相互比较的。
2)施测过程标准化:首先,无论在何时何地给何人施测,主考官宣读的测验指导语必须完全一致。第二,测验的时间要统一、严格控制,这一点对能力测验尤为重要。在本章稍后给出的案例中,对施测过程的标准化将有更加具体、详细的介绍。
3)评分标准化:即客观评分。对于那些需要主观评分的测验,要求至少有两个以上受过专业训练的评分者同时评分,而且他们的分数必须具有一致性。
2.试述人格问卷正规化的研究设计
1)研究量表准备就绪:明确测验编制目的、概念定义、理论构建、项目编制、量尺选择 2)探讨新编问卷的因子结构与项目分析
? 方法
? 被试:被试约300人左右 ? 工具:新编问卷测试版
? 程序:抽样(随机分层、随机整群)、问卷实施、数据输入与分析
? 结果与分析:
? 因素分析和各种项目分析方法结合。主要是探索量表的因素结构(结构效
度)。
? 理想的结果是当删除若干项目后,获得比较清晰的量表结构。
? 这时量表可定稿为正式版(当然最好在验证性因素分析也通过的时
候)
? 可继续分析量表的信度即内在一致性系数。 ? 可继续分析量表维度之间的相关(结构效度)
? 若量表结构不清晰,这一次研究当作试测,须重新修改或编制问卷,重新收
集数据,并进行分析,直到量表结构清晰为止
3)分析新编问卷的重测信度
? 方法
? 被试:约50~60人 ? 工具:新编问卷正式版
? 程序:分两次测定,间隔7天~3月不等,须记名
? 结果:
? 对同一组被试测试获得的两组数据,计算r。
? 讨论:若r>0.8以上表示重测信度较好,新编测验比较稳定,不受被试状态与环境
变化影响。
4)分析新编问卷的效标关联效度
? 方法
? 被试:约50~60人。(n越大越好) ? 工具:新编问卷正式版与校标问卷 ? 程序:
? 结果:
? 计算新编问卷与校标之间的相关系数r。
? 讨论:若r>0.2以上表示测验的效度较好,新编测验能测想测的心理特质。 5)目的:验证研究一发现的新编量表的因子结构
? 方法
? 被试:约300人(与研究一不同) ? 工具:新编问卷正式版 ? 程序:
? 结果与分析:
? 模型建构;
8
《心理测量原理》2018心理辅修班Lxling
? 验证性因素分析,可采用LISREL或AMOS 等软件,进一步研究一确定量
表的结构效度。结果好坏看有关指标。若结果不理想,尚须修订正式版
七、测验研究中的数据分析
? 重要概念 1. 因子荷重 ..
以变量(题目)为因变量以各抽取因子为自变量进行回归分析,每个系数即为loading 2. 公因子方差h2 ..
hi2=ai12+ai22+…+aim2,为因子载荷矩阵中第i行元素的平方和,称为共同度。 公因子的方差的意义在于说明当由原始变量空间转化为因子空间后,保留原来各变量的信息
2
有多少,当hi越接近1时,说明空间转化性质越好。
? 思考题: (1)
因素分析的步骤 1. 因素分析的一般哪些步骤? ..
第一步:数据适合性检验与抽取因子数目的确定 (1) 数据适合性检验 (2) 确定抽取因子的数目
第二步:因子数目确定后,获得清晰地的结构,同时确定哪些项目删除 (2) 确定哪些项目删除
(3) 因子旋转:以获得更清晰地结构 2. 因素分析中如何确定因子的个数? ..
(1) 潜根值(Eigenvalalue)准则,即潜根值大于1。
(2) 碎石图(Scree test)准则,取曲线开始转折前的因子个数。
(3) 有些情况下,分析人员事先确定因子的个数(number of factors)。这种做法适合检验
因子的理论或重复某些工作。总之,采取最容易解释且最简单的因子结构为好。 3. 如何运用因素分析的结果进行项目分析(删除项目)? ..
确定抽取因子的数目
进行因子旋转(正交旋转法或者斜交旋转)
a) 在所有因子因子荷重(lodging)均小于0.3的项目; b) 两个因子上因子荷重(lodging) 差不多大小
c) 根据实际需要,从大到小排列,删除后面不需要的 4. 因子旋转的目的是什么?一般采用哪种旋转方法? ..
因子旋转的目的:以获得更清晰地结构 一般采用一般选Varimax(正交旋转法),为更容易解释,也会使用斜交旋转法
八、常模
? 重要概念 1. 常模:经常(或一般水平)的标准 ..书上:根据标准化样本的测验分数经过统计处理而建立起来的具有参考点和单位的测验量表 2. 团体内常模:能够代表团体(标准化样本)的测验分数 ..3. 相对位置分数:某一个体测量分数在常模中的相对位置 ..4. 标准分数:是一种具有相等单位的量数,又称作Z分数 ..5. T分数:T=A+B×Z (由标准分数Z扩大B倍(消除小数)再加上A(消除负号)转换..
后的分数);由标准分数Z扩大10倍(消除小数)再加上50(消除负号)转换后的分数 6. 百分等级P: :在一个群体的测验分数中,得分低于这个分数的人数的百分比 ..7. 标准 标准,从定性方面讲,指的是测试的内容或行为的范围,它将通过“内容领域规范”..
得到明确。 ? 思考题:
9
《心理测量原理》2018心理辅修班Lxling
1、 试述常模的概念与作用。
作用:用于测验分数的解释,提供一个一般的标准来解释测验分数。
2、 试述两类常模的异同。
根据参照的是已达到的发展水平还是某团体中的相对位置,常模就可划分为发展常模和团体内常模两大类型。 常模类型 作用 是否用到现代描述结果 最经典其他例子 统计学知识 例子 发展性常模 用以描述个否 笼统、模比率智如智力年龄、年级当体达到的发糊 商 量、顺序量表、发展展水平 商数和比率智商等 团体性常模用以描述个比较精确 是 离差智如百分位常模(P),(离差常体在某一特 (标准分商 标准分常模(Z,T) 模): 殊团体中的数) 相对位置 (1)发展性常模:比率智商 1.如智力年龄、年级当量、顺序量表、发展商数和比率智商等,用以.描述个体达到的发展水平。
2.常模分数的计算没有运用了现代统计学的知识 3.笼统、模糊
(2)团体内常模:离差智商
1.如百分位常模(P),标准分常模(Z,T),用以描述和体在某一特殊团体中的相对位置。
2.常模分数的计算运用了现代统计学的知识:标准分数 3.比较精确
3、 试述团体内的思路及其优越性。 思路:将个体分数与团体比较
优越性:有一个统一而清楚地定义好的数量关系,能运用大多数统计分析技术
4、 如何编制测验常模? 常模的编制
(1) 常模的抽样方面:
抽样方法:一般采用随机分层的方法,有代表性即可 抽样容量:子样本数×300
(2) 常模的统计方面:如何编制测验常模?
a) 提供一般水平:X±SD, b) 计算相对位置:Z,P,T等
常模样本(团体、样组)的总体信息: X±SD
相对位置分数:个体分数与总体分数的结合:Z,T,P
补充:
标准参照测验与常模参照测验的区别 定义 目的 评估结果的变化 把被评估者所得的分数实施常模参照评估的目的主这类评估的结果直接与常与常模进行比较,从而判要是将个人的表现与其他人模团体的水平有关,会随常模参照测验 断被评估者在团体中的的表现进行比较,重点放在着常模团体的变化而变相对地位 个体所处的相对地位上 化。 指将被评估者所得的分它按绝对掌握水平来测量个标准参照评估中的标准常标准参照测验 数与某个标准进行比较,人的某些技能的发展,即相常直接来自教学目标,常10