全国普通高校大学生竞赛白皮书(2012-2017)
上QQ阅读APP看书,第一时间看更新

2.3 模型信效度检验

信度是指研究所得事实、数据的一致性和稳定性程度,是保证研究科学性的重

① 在特等奖中明确标注名次的计分方法:第二名计8分,第三名计7.5分,第四名计7分,特等奖数量4个以上全部计6分。要先决条件。学科竞赛评估模型同样需要经受信度考验。一般而言,高等教育在短期内具有一定的稳定性,亦即在统计意义上而言,高校学科竞赛成绩具有一定的稳定性,在连续一段时间内不同年份之间的数据应该具有显著的相关性。我们采用不同年份的数据来考察同一个评估模型面对不同年份数据的时候是否具有一定的稳定性。采用SPSS计算2014、2015、2016三年间高校学科竞赛评估结果的肯德尔相关系数,结果显示相关系数在0.571至0.620之间,显相伴概率为0.000,达到显著相关,支持模型的重测信度(见表2.7)。

表2.7 近三年高校排序的肯德尔相关系数

备注:**表示置信区间为99%。

效度是一个测验对其所要测量的特质测量到什么程度的估计,本研究拟采用效标关联效度考察模型的有效性。所谓效标关联效度指的是一个测量与预测量的特征的其他标准之间的相关程度,一般用两种研究指标与校标指标的相关性来表示。学科竞赛体现了学校综合实力的一部分,因此可以用学校评估结果作为关联效标。综合考虑,本研究共选用两个效标。① 高校综合排名效标:将中国科教评价网2015年发布的134所重点高校综合竞争力排行榜排名数据作为第一个效标,同与之匹配的134所高校的学科竞赛得分进行相关分析,计算得到肯德尔相关系数为0.540,相伴概率达到0.000,说明两者显著相关,在测量学上支持本研究具有较好的效度。② 高校科技竞争力排名效标:大学生的学科竞赛需要教师指导,教师自身的科研能力在一定程度上会对学科竞赛产生影响。为此,我们选取武汉大学2016年发布的高校科技竞争力得分作为学科竞赛的效标,用2016年本科学科竞赛得分与科技竞争力得分进行肯德尔相关分析,结果显示,肯德尔相关系数为0.482,相伴概率为0.000,说明两者显著相关,学科竞赛评估模型通过效度检验。