“切题工程”是“素质测量系统工程(Test System Engineering for Talent's Equipment, TSETE Ⅰ,切题工程Ⅰ)”与“应试训练系统工程(Training System Engineering for Taking Exams, TSETE Ⅱ,切题工程Ⅱ)”的简称;“切题”是两者共同的英文缩写“TSETE”的谐音。在军事系统工程及航天系统工程中,导弹及航天器要逐零部件地研制、组装、检修,并发射成功及命中目标或进入预定轨道;
工程介绍
◆ 任何考试的备考与应试,也构成一项复杂的系统工程——应试训练系统工程,考生也应逐考点地学习\u57f9训、融会贯通、检修,并在考场上“发射成功”,“命中考试目标”或进入预定“成绩轨道”——稳定地通过考试.
从上述对比可以看出:任何考试的备考应试与军事系统工程及航天系统工程的研制发射,在本质上具有共同性,都是一项需要通过对大量要素的综合集成来达到特定目标的系统工程,涉及特定系统(导弹\u822a天器系统;考生的能力\u7d20质系统)的能力建设、检修以及在特定环境中的“发射”.
“切题工程”是“素质测量系统工程(Test System Engineering for Talent's Equipment, TSETE Ⅰ,切题工程Ⅰ)”与“应试训练系统工程(Training System Engineering for Taking Exams, TSETE Ⅱ,切题工程Ⅱ)”的简称;“切题”是两者共同的英文缩写“TSETE”的谐音.“切”在这里取“切合、贴切、完全符合”之意,无论是命题活动还是应试活动,都应当切其各自之“题”.
“切题工程”是
社会系统工程专家组成员
江晗(
北京实现者社会系统工程研究院人才系统工程专家)、
孔昌生(
人事部新闻发言人、政策法规司司长,曾任《
中华人民共和国公务员法》起草小组副组长)、
霍宪丹(司法部
司法鉴定管理局局长,参与了国家统一
司法考试制度的论证和创立)、
薛惠锋(全国人民代表大会常务委员会资源与环境委员会法案室主任、中国航天工程咨询中心教授\u535a士生导师,中国航天社会系统工程实验室理事\u4e3b任,西北工业大学自动化学院教授/博士生导师)、
常远(中国航天社会系统工程实验室理事\u7814究员,北京实现者社会系统工程研究院首席社会系统工程专家、 西北工业大学资源与环境信息化工程研究所教授、
中国政法大学知识产权研究中心研究员)等多位专家在多年研究基础上创立的综合集成的考试测量与应试训练系统架构,帮助
考试命题机构和应试培训机构进行能力建设并创造绩效.
这是一种
模型驱动架构(Model Driven Architecture, MDA),以应试培训规律和作为最终用户的应试受训者的切实需求为中心,以迭代方式(iterative approach)对需求进行稳健而持续地细化,适用于任何领域的应试培训.该工程的最终目的,是像
军事系统工程、
航天系统工程的研制过程中综合集成多种有效措施确保导弹或航天器发射、运行、回收万无一失那样,保证所有参加应试培训的正常考生完全、系统、稳定地具备考试过关所必须具备的一切要素和条件,通过基于系统化测控的“多级推进”在考场上以稳定的高可靠性完成“发射目标”——通过考试资格线,乃至实现理想的应试高绩效.
“切题工程”的主要研发方是
社会系统工程专家组(Expert Group on Social System Engineering, EGSSE)、
北京实现者社会系统工程研究院(Realizer Beijing Institute of Social System Engineering, RISSE)等机构。
学科背景
“切题工程”涉及系统科学[如反馈控制、复杂系统
建模与
仿真、系统评价模型、命题能力建模、应试能力建模、层次分析、
泛系分析、
复杂系统聚类
算法、复杂系统分类算法,
叙词系统工程等等]、人才系统工程[如人才目标能力/素质/资质(competency)分析与设计,人才能力/素质/资质(competency)测量与建模,人员能力成熟度模型(People Capability Maturity Model, P-CMM),职业能力倾向测验(Vocational Aptitude Test),
经典测量理论(Classical Test Theory, CTT),
真分数理论(True Score Theory),新一代测量理论(test theory for a new generation of tests),试题反应理论(Item Response Theory, IRT),试题应答模型,试题特征函数(Item Characteristic Function),《心理与教育测量标准》(Standard for Educational and Psychological Testing)以及命题能力成熟度,应试能力成熟度,电脑化适应性测验(Computerized Adaptive Test, CAT),试题
难度(item difficulty)算法,试题
信度/可靠度(reliability)算法,试题
效度/有效度(Validity)算法,试题
区分度(discrimination)算法等]、数学[如
数据挖掘技术与算法,
遗传算法,
离散数学,
模糊数学,统计学,多元概括化理论(Multivariate Generalizability Theory),DX3试题算法,模拟试题DX4逼真度算法,HZ-SY课件数据智能分解算法,HZ-SY课件数据智能整合算法等]、
信息科学与技术(如计算机科学、
人工智能、
数据仓库与复杂
数据库技术、
模式识别、网络技术、TESTE-MT方案生成器、TESTE智能命题器、TESTE
题库分析器、TESTE智能
组卷器、TESTE智能检测器、TESTE智能分析器、TESTE智能修补器,等等)、教育学、心理学[尤其是心理计量学(psychometrics)等]以及与被测人员素质相关的专业学科等众多专业领域.
检测工程
切题工程Ⅱ
“切题工程Ⅱ”的应试培训方式,在技术上,既可以选择实时同步,也可以选择非实时异步;非实时异步培训可以在线进行,也可以离线进行(如用光盘及其它信息载体).无论面授、网授还是面网结合、人机结合,都是可以随意选择的培训手段,可以单独使用,也可整合使用.
对受训者或考生应试素质或应试能力状况,将由“切题工程Ⅱ”的应试能力测控师(Engineering for Observation & Control, EOC)负责进行系统化的
反馈(feedback)调控[反馈(feedback),指系统对其环境的输出结果,又反过来作用于系统自身,从而影响系统未来的输出.若反馈对系统未来的输出起增强作用,就是
正反馈(positive feedback);若反馈对系统未来的输出起减弱作用,就是
负反馈(negative feedback).
反馈控制的基本原理是,利用误差来产生调节作用并进而消除或减小误差].测控工程师的基本职责有3:
(1) 对培训结果(受训者或考生应试素质/应试能力)的进行不同规模的、系统化的多级检测(查缺)与反馈(补缺).
(2) 对授课教师、辅导教师提供实证的反馈信息,以确保授课质量的持续改进.
(3) 对教务等管理部门提供实证的反馈信息,以确保应试培训管理工作的持续改进.
“切题工程Ⅱ”标志着应试培训方式的根本性的转变——
◆ 由粗放型培训向精确型训练转变,如对
运动员和使用精密武器的军人的训练;
◆ 由无反馈、弱反馈、部分反馈型培训向强反馈、全面系统化反馈型培训转变;
◆ 由低专业型、准专业型(指对应试培训活动的专业化科学研究)培训向高专业型培训转变;
◆ 由无技术、低技术支持型培训向人机结合、人网结合的高技术支持型培训转变;
◆ ……
参照军事系统工程和航天系统工程,基于
反馈控制(feedback control)原理的“切题工程Ⅱ”将培训和应试分为3大阶段,部分阶段之间、阶段内部也存在着相互联系和相互作用:
(1) 考生的培训或学习阶段,旨在使考生完整透彻的理解各类考试大纲所要求掌握的知识,并将这些知识有效地转化为考生的应试能力.这相当于导弹或航天器的研制阶段,受训考生相当于“切题工程Ⅱ”研制的导弹或航天器.
(2) 由测控系统及测控工程师对培训结果(考生应试素质或应试能力)的大规模多级检测(查缺)与反馈(补漏)阶段,相当于导弹或航天器的检测调试阶段.这相当于“切题工程Ⅱ”对相当于导弹或航天器的受训考生进行精确测控.此阶段可对培训提供相应的反馈信息.
(3) 考生在考场上的应试阶段,相当于导弹或航天器的发射前准备及发射.显然,发射前的导弹或航天器的功能状态应当是完善的,这相当于考生此时已“修成正果”——具备了完善的应试能力.在考场上“发射”后的“测控”活动当然是由考生自己进行的,需要调整好考前的身心状态.
“切题工程Ⅱ”在中国
国家司法考试应试培训中的应用即为“国家司法考试应试培训系统工程(TSETE-SJE Ⅱ)”,其研发主体是
中国政法大学司法考试学院.
切题工程I
社会系统工程专家组成员
江晗认为:在人才系统工程架构下,“切题工程Ⅰ”的研究与开发成果,用于作为人员素质测量系统的各类考试制度(包括命题工作)的持续改进.因为,因为任何
考试的
命题也要切题,它切的是另外1种“题”——任何试题和试卷都要切合于测量目标群体与个人的某种目标素质,表现为目标素质元素(即知识点/考点)的系统化整合.作为人员素质测量工具之一的试题如果不能有效测量出被测人员的特定素质或能力(competency),即便这些人员在应试时所答切题,也不能有效反映其真实素质或能力(competency).
社会系统工程专家组的
薛惠锋教授指出:“如果考试的命题工作不能体现‘TSETEⅠ’的科学原理,就不能正确地设计出满意的目标素质系统,就不能正确地设计出针对预定目标素质系统(目标素质元素系统化整合而成)的满意的测量工具(如试卷),从而可能造成这样1种尴尬局面——考试合格的人,并不真正具备我们所要求的目标素质.”