基于多元概化理论的中小学教师资格考试质量分析——以《综合素质》（中学）科目为例

心理与行为研究 ›› 2019, Vol. 17 ›› Issue (2): 253-258.

基于多元概化理论的中小学教师资格考试质量分析——以《综合素质》（中学）科目为例

杨宏博, 赵轩

教育部考试中心, 北京 100084

收稿日期:2017-08-30 出版日期:2019-03-20 发布日期:2019-04-19
通讯作者: 杨宏博,E-mail:yanghb@mail.neea.edu.cn
基金资助:
全国教育科学规划教育部青年项目（EGA150361）

QualityAnalysis in National Teacher Certification Examination Based on Multivariate Generalizability Theory

YANG Hongbo, ZHAO Xuan

National Education Examinations Authority, Beijing 100084

Received:2017-08-30 Online:2019-03-20 Published:2019-04-19

摘要/Abstract

摘要： 教师资格考试是国家教育规划纲要确定的改革项目之一。本文运用多元概化理论对中小学教师资格考试笔试科目《综合素质》（中学）试卷的测量信度、试卷总分合成、试卷结构优化等问题进行探讨。研究发现：本次测试的测量信度较高，为0.707；各测量分项对全域总分的方差贡献比例与试卷赋分意图基本一致，除写作能力外，其余部分误差在7%以内；可以采取减少客观题数量，增加主观题数量的方式来提高信度。

关键词: 多元概化理论, 中小学教师资格考试, 信度

Abstract: National Teacher Certification Examination is one of the reform program identified in The National Medium and Long-term Education Reform and Development Plan Outline (2010-2020).In this article, we adopted multivariate generalizability theory (MGT) to appraise test reliability, combination of scores, test structure optimization based on data of National Teacher Certification Examination. The result showed that: a) the reliability coefficient of whole test is 0.707, the result is acceptably high; b) the ratio of each subtest's contribution to total variance is inaccordance with test-setters' anticipation, in addition to writing ability, the remaining part of the error is less than 7%; c) to promote test reliability, it is recommended to reduce the number of objective questions and increase the number of subjective question.

Key words: multivariate generalizability theory, national teacher certification examination, reliability

中图分类号:

G443

杨宏博, 赵轩. 基于多元概化理论的中小学教师资格考试质量分析——以《综合素质》（中学）科目为例[J]. 心理与行为研究, 2019, 17(2): 253-258.

YANG Hongbo, ZHAO Xuan. QualityAnalysis in National Teacher Certification Examination Based on Multivariate Generalizability Theory[J]. Studies of Psychology and Behavior, 2019, 17(2): 253-258.

参考文献

安哲锋, 骆方, 张厚粲. (2008). 多元概化理论在评定量表编制中的作用——以音像教材测评数据分析为例. 心理科学, 31(5), 1192-1194
白娟. (2014). 基于多元概化理论的全国硕士研究生中医综合考试质量分析. 天津中医药大学学报, 33(1), 44-46
陈维, 何壮, 赵守盈. (2016). 高考语文模考试卷题型结构的多元概化分析. 教学与管理, (18), 116-118
陈维, 卢聪, 杨晓晓, 张进辅. (2016). 领悟社会支持量表的多元概化分析. 心理学探新, 36(1), 75-78
陈维, 赵守盈. (2016). 大学生网络成瘾量表(修订版)的多元概化分析. 心理与行为研究, 14(1), 95-99, doi:10.3969/j.issn.1672-0628.2016.01.014
关丹丹, 任子朝. (2009). 应用概化理论评价课标后高考数学试卷. 数学通报, 48(11), 18-24, doi:10.3969/j.issn.0583-1458.2009.11.006
教育部. (2013). 中小学教师资格考试暂行办法. 2017-06-25取自http://www.moe.gov.cn/srcsite/A10/s7151/201308/t20130821_156643.html
教育部考试中心[C1]. (2017). 中小学教师资格考试统计分析报告(内部材料).
黎光明, 张敏强. (2017). 高校教师教学水平评价多元概化理论权重效应分析. 心理发展与教育, 33(1), 122-128
刘远我, 张厚粲. (1998). 概化理论在作文评分中的应用研究. 心理学报, 30(2), 211-218
罗杰, 戴晓阳. (2016). 中文形容词大五人格量表的初步编制Ⅲ:基于概化理论的视角. 中国临床心理学杂志, 24(1), 88-94
罗照盛, 郭小军. (2014). 认知行为实验研究中最佳素材容量的选择与确定:多元概化理论应用. 心理学报, 46(6), 876-884
田霖, 韦小满, 王桥影, 赵晓茫. (2013). 基于概化理论构建自学考试信度分析框架. 考试研究, (5), 27-33
杨志明, 张雷. (2003). 测评的概化理论及其应用. 北京:教育科学出版社.
Brennan, R. L. (2001a). Generalizability theory. New York:Sprin-ger-Verlag.
Brennan, R. L. (2001b). An essay on the history and future of reliability from the perspective of replications. Journal of Educational Measurement, 38(4), 295-317, doi:10.1111/jedm.2001.38.issue-4.
Brennan, R. L. (2001c). Manual for mGENOVA. Iowa City, IA:Iowa Testing Programs, University of Iowa.

[1]	刘文, 孟祥蕊, 车翰博, 张嘉琪, 沈漪. 小学生创造性人格教师评定问卷的编制及信效度检验[J]. 心理与行为研究, 2020, 18(5): 624-630.
[2]	王战旗, 张兴利. 创造力成就问卷的中文修订[J]. 心理与行为研究, 2020, 18(3): 390-397.
[3]	张丽娜, 路海东. 高中生感知到的课堂教学方式量表的编制[J]. 心理与行为研究, 2019, 17(6): 773-779.
[4]	郝嘉佳, 陈英和, 刘拓, 白学军. 儿童青少年一般思维能力测验的编制和初步应用[J]. 心理与行为研究, 2019, 17(5): 620-626.
[5]	戴斌荣. 农村儿童社会适应问卷的编制[J]. 心理与行为研究, 2019, 17(4): 504-511.
[6]	马惠霞, 刘慧芳, 翟永芳, 李桂芳. 《青少年自我意识情绪测验》的修订及信度效度验证[J]. 心理与行为研究, 2019, 17(2): 240-245.
[7]	郭静, 王瑛, 季丽丽, 贾丽萍, 卢国华. 心理危机脆弱性量表的编制及信效度检验[J]. 心理与行为研究, 2018, 16(6): 847-853.
[8]	罗杰, 周瑗, 陈维, 潘运, 赵守盈. 青少年学习倦怠量表的多元概化分析[J]. 心理与行为研究, 2018, 16(5): 665-669,712.
[9]	陈秋燕, 张晨光, 程科. 创伤后成长问卷在地震灾区教师中的修订[J]. 心理与行为研究, 2018, 16(5): 670-677.
[10]	方晓义, 袁晓娇, 胡伟, 邓林园, 蔺秀云. 中国大学生心理健康筛查量表的编制[J]. 心理与行为研究, 2018, 16(1): 111-118.
[11]	王华, 缴润凯. 大学生职业生涯管理能力问卷的编制及信效度检验[J]. 心理与行为研究, 2017, 15(6): 793-798.
[12]	齐亚静, 伍新春. 中小学教师工作重塑问卷的编制[J]. 心理与行为研究, 2016, 14(4): 501-506.
[13]	涂翠平, 樊富珉. Kaufman领域创造力量表中文版的验证及初步应用[J]. 心理与行为研究, 2015, 13(6): 811-816.
[14]	黄时华，官永雄，张卫. 大学生道德情感问卷的初步编制^*[J]. 心理与行为研究, 2014, 12(4): 521-526.
[15]	杨玲，王含涛，周艳艳. 中学生内疚和羞耻情境量表的编制及适用:基于多元文化背景下中学生道德情感研究^*[J]. 心理与行为研究, 2014, 12(3): 339-344.