五、综合题
1为了了解大学生对学校教学现状的满意度,某大学生进行了一项研究。部分研究过程和结果如下:
访谈抽样与构建初测问卷:研究者利用晚自习,在图书馆阅览室随机抽取部分大学生进行访谈,对访谈资料进行概括、归纳,编制出学校教学现状满意度初测问卷,用5点量表计分。
试题与题目筛选:随机抽取文、理各5个班进行测试,计算各题的平均分、标准差及每道题与测验总分的相关(区分度),其中前10题的数据见下表。
表3 部分题目的数据表
信度、效度分析:随机抽取文、理科各10个班,每班随机抽取25名学生进行正式测试,对398份有效问卷先作探索性因素分析,得出问卷包括3个维度,再对这398份问卷作验证性因素分析,探讨问卷的结构效度。此问卷各维度的α系数见下表。
表4 学校教学现状满意度问卷的信度
差异检验结果:考察不同学科学生态度差异可以用t检验,也可以用F检验。现给出的方差分析结果见下表,研究者据此得出结论:文、理科学生在维度Ⅲ的态度差异程度大于维度Ⅱ的态度差异。
表5 学校教学满意度的方差分析
请回答下列问题:
(1)该研究的访谈抽样和初测问卷的构建过程存在哪些不足?如何改进?
(2)针对表3的数据,提出项目筛选的建议并说明理由。
(3)表4中的α系数是否符合心理测量学的要求?它反映了问卷的什么心理测量学特性?
(4)该问卷的结构效度考察过程是否存在错误?并说明理由?
(5)根据表5的数据,文、理科学生对学校教学现状满意度是否存在差异?研究者得出的结论是否正确?为什么?[统考2018年研]
答:(1)存在的不足:
①访谈抽样是晚自习时间在图书馆自习的学生,可能不是全体学生的代表性样本。
②采用一般的概括、归纳法来编制的初测问卷,存在一定的主观性。改进方法:
a.抽样方法可采用全校学生随机抽样,或按学科分层随机抽样,或按性别分层随机抽样。
b.可采用质性资料分析技术,对访谈资料进行编码,考察编码信度,在此基础上构建初测问卷。
(2)应删除第4、7题,因为这两题的得分与总分相关不显著。尽管第3题的得分与总分相关显著,但相关系数绝对值小,也应删除。
(3)该问卷三个维度的信度均较高,符合心理测量学的要求,它反映了各维度的内部一致性(或同质性)程度较高。
(4)存在错误:
研究者用同一批数据进行探索性因素分析和验证性因素分析,是循环论证,这是错误的。
(5)文、理科学生在维度I上差异不显著,在维度Ⅱ和维度Ⅲ上差异显著。研究者的结论不正确。在0.01水平还是0.05水平上差异显著仅表明下结论时犯I型错误的大小,并不说明总体上差异程度的大小。
2某测验共有6个题目,50名被试在该测试各个题目上得分的方差是0.75、0.81、0.79、0.83、0.85、0.77。测试总分的方差是16.00。
请回答下列问题:
(1)计算该测验的α系数:
(2)某被试的测验总分为65,估计其真分数95%的置信区间;
(3)如果要提高该测验的信度,可采用哪些方法?[统考2015年研]
答:(1)将题目中的数据代入公式:
(2)
该测验的置信区间是:65±1.96×1.6=(61.864,68.136)。
(3)①主试方面
主试严格执行实测规程,评分者要严格按标准给分。
②被试方面
选取恰当的被试团体,提高测验在各同质性较强的亚团体上的信度。
③测量工具方面
a.精心编制测验量表,避免出现较大的系统误差。适当增加测验长度,但新增项目须与原题同质,且新增项目须适度。
b.使所有题目难度接近正态分布,并控制在中等水平,这样得分分布更广。
c.努力提高试题的区分度。
④施测过程方面
施测场地按测验手册的要求进行布置,减少无关因素的干扰。