本书是北京市教育科学“十三五规划”优先关注课题“‘1+X’证书制度建设中技能评价方法研究”的研究成果，旨在开发基于建构主义和情境学习等先进学习理论的、技能考试与职业能力测评相互补充的、反映综合能力（行动能力）评价要求的、具有高预测效度的综合性技能评价模型和评价方案，为建立科学的技能等级证书制度和“职教高考”提供方法论基础和技术支持。本书主要内容包括提高技能考试和能力测评对工作绩效预测效度的理论，技能考试方案开发实践探索，情境性技能考试题目开发与评价实验。

目 录


理 论 研 究
第一章职业教育的学业评价
/ 3

一、学业评价方法：一个被忽视的重要领域 /
3

（一）传统学历教育的课程评价脱离实践 / 4
（二）X 技能等级证书缺乏规范的技能考核方法 / 4
（三）职教高考科学性不足，“指挥棒”作用有待优化 / 4
（四）技能大赛存在评价效度问题 / 4

二、职业技能考试和职业能力测评 /
5

（一）职业技能考试 / 5

（二）职业能力测评 / 7

三、学业评价标准 /
7

（一）事实性标准 /
8
（二）社会性标准 /
8
（三）个性化标准 /
9


四、学业评价方法分类 /
9

（一）量化评价 /
9
（二）质性评价 / 10
（三）混合式评价 / 11
（四）诊断性评价 / 12


五、“1+X”证书对职业技能评价技术的要求 / 12


Zjjzw.indd 9


2024/8/19 14:02:07


职业技能评价方法研究
X
第二章有关职业技能/能力评价的理论研究/18
一、职业技能/能力的概念 / 18（一）对能力的理解 / 18
（二）职业能力 / 22
（三）技能与职业技能 / 29
二、职业技能/能力评价研究 / 32（一）职业技能/ 能力评价的概念 / 32
（二）职业技能评价方法 / 37
（三）职业技能评价方法的质量 / 47
（四）职业技能评价方法的有效性评价 / 51
（五）总结 / 58
三、世界技能大赛试题的启发 / 59（一）世界技能大赛的题目与评分标准 / 60
（二）世界技能大赛对X 技能证书考试的启发 / 64
四、部分发达国家技能考核方案经验借鉴 / 69（一）德国行会的毕业考试 / 69
（二）英国学徒制的证书考试 / 72
五、基于现代信息技术测评方法的展望 / 75（一）职业能力测评自动评分的可行性思考 / 75
（二）基于区块链测评答案评阅方法 / 76
（三）多模态学习分析赋能能力测评的可能性 / 78
实 证 研 究
第三章X技能等级证书考试元评价/87
一、研究设计 / 87（一）有效性论证框架的构建 / 88
（二）元评价工具的设计 / 88
Zjjzw.indd 10 2024/8/19 14:02:08

（三）元评价过程的设计 / 89

二、基于证据的元评价过程 / 90

（一）测试分数的有效性 / 90
（二）测试分数解释的有效性 / 94
（三）测试结果使用的有效性 / 107
（四）测试及其结果使用影响的有效性 / 109
（五）各级指标达成度数据 / 112
（六）小结 / 115

三、元评价结果的分析与讨论 / 118

（一）元评价结果 / 118
（二）测试分数有效性结果分析 / 121
（三）测试分数解释有效性结果分析 / 124
（四）测试结果使用的有效性结果分析 / 143
（五）测试及其结果使用影响的有效性结果分析 / 145

四、本章总结 / 147

附件：职业技能评价方法有效性框架 / 148

第四章技能评价方式比较研究——以养老服务为例
/
150

一、研究设计 / 150

（一）研究设计的原则 / 150
（二）研究目的与假设 / 153
（三）研究方法 / 154
（四）研究内容与关键点 / 156


二、研究过程 / 157

（一）技能评价工具开发 / 157
（二）绩效评价的360o 问卷开发 / 161
（三）技能评价的实施 / 162
（四）工作绩效评估的实施 / 164


XI
Zjjzw.indd 11


2024/8/19 14:02:08


三、职业技能评价方式比较研究结果 / 165

（一）测评中使用的试题分析 / 165
（二）技能评价的统计指标检验 / 173
（三）基于COMET 技能评价结果对工作绩效的预测效度检验 / 179
（四）技能评价的成本分析 / 190
（五）小结 / 191

四、结论及建议 / 192

（一）主要结论 / 192

（二）建议与展望 / 197

附件：本项目中采用的职业院校技能大赛养老服务技能赛项试题 / 201

第五章COMET
职业能力测评实践案例
/
207

一、测评工具的选择与开发 / 207

（一）测评方案的选择 / 207

（二）背景问卷开发 / 208

二、测试过程 / 211

（一）COMET 职业能力测评 / 211

（二）背景问卷调查 / 214

三、测评结果分析 / 222

（一）学生职业能力现状 / 222
（二）职业能力水平的差异表现 / 231
（三）职业能力轮廓结构的差异表现 / 237
（四）职业能力的潜在特征分析 / 242
（五）职业能力发展的关键影响因素识别 / 258
（六）动机、活动、环境因素对职业能力的影响机制探究 / 261

四、研究发现与建议 / 268

（一）研究发现 / 268

（二）建议 / 270

附件：正式问卷的量表 / 274


第六章职业技能等级证书考核评价指南（建议稿）/277
附录一研学旅行策划与管理职业技能等级考核指导方案（中级）/283
附录二光伏电站运维职业技能（初级）考核实操考试样题/291
附录三在线学习服务职业技能等级证书（中级）考试大纲/298