高等教育中学习成果的直接测量：工程专业九项标准化评估量表开发与验证

为解决高等教育中学习成果(LOs)客观评估难题，本研究开发了九项针对工程专业的标准化直接评估量表。通过专家研讨(Study 1)和1420份实证数据(Study 2)验证，量表展现出单因子结构、高信效度(克朗巴哈α>0.8)及适宜难度，为工程教育质量保障(如华盛顿协定认证)提供标准化工具，支持院校持续改进(continuous improvement)和跨机构比较研究。

　　

在全球化竞争加剧的背景下，工程教育正面临前所未有的挑战。随着《华盛顿协定》等国际认证体系将学习成果(Learning Outcomes, LOs)作为核心评估指标，高校亟需客观可靠的评估工具来证明教育质量。然而，现有研究存在两大痛点：一是评估多依赖间接指标(如学生满意度)，缺乏直接测量工具；二是传统方法难以兼顾技术能力与社会责任等综合素养的评估。这种现状严重制约了工程教育的持续改进(continuous improvement)和跨国资格互认。

为破解这一难题，哥斯达黎加理工学院(Tecnológico de Costa Rica)的研究团队在《Evaluation and Program Planning》发表创新性研究。该团队通过两阶段混合方法，开发出覆盖终身学习、伦理决策等九大维度的工程教育LOs评估体系。研究最突出的价值在于：首次实现将抽象的综合素养(如"社会变革推动力")转化为可量化指标，并验证其适用于拉美教育情境——这对全球南方国家的工程认证具有特殊参考意义。

研究采用三项关键技术：1)基于德尔菲法的专家共识构建(16名工程教育专家参与)；2)弗莱斯Kappa(Fleiss Kappa)检验量表内容效度；3)项目反应理论(Item Response Theory, IRT)分析1420份评估数据的心理测量学特性。数据来源于该校课程分析工具(curriculum analytic tool)重构项目，涵盖多个工程专业的实际教学评估。

【研究结果】

1. 量表开发(Study 1)
   通过专家研讨会确立九大LOs操作化定义，如"工具使用(TOOL)"强调工程软件的应用能力。指标设计采用双盲背对背评审，除"团队协作"量表(Kappa=0.41)外，其余量表均达良好以上一致性(最高为"伦理决策"量表Kappa=0.93)。

2. 心理测量学验证(Study 2)
   探索性因子分析证实单维结构(方差解释率>60%)，所有量表的克朗巴哈α系数>0.8。难度参数(P值)集中在0.3-0.7理想区间，鉴别度指数(Discrimination Index)均>0.4。值得注意的是"项目管理"量表在实践情境中展现出超预期效度(r=0.82)。

【结论与讨论】
该研究突破性地解决了综合素养的量化评估困境，其九维度框架既符合《国际工程联盟》标准，又创新性地整合了拉美教育特色。特别值得关注的是，研究发现LOs评估必须平衡"标准化"与"情境适应性"——例如"团队协作"量表在专家阶段效度较低，但在实际教学中表现良好，揭示出工程教育评估中实践情境的关键调节作用。

研究局限性在于样本仅来自单一院校，未来需跨文化验证。但就应用价值而言，这些量表已成功支持该校通过工程认证，其模块化设计(如可独立使用的"伦理决策"子量表)为不同院校提供了灵活应用空间。正如作者强调，这套工具不仅服务于认证需求，更能通过LOs的历时性比较，帮助院校识别教学改革中的"隐性短板"，最终推动工程教育从"技术训练"向"全人培养"的范式转型。