错误消息设计与学生状态对大学课程注册系统中错误恢复的影响

《Proceedings of the Human Factors and Ergonomics Society Annual Meeting》：Implications of Error Message Design and Student Status on Error Recovery in University Course Registration Systems

　　

尽管课程注册系统（course registration system）在高等教育中普遍存在，但针对这些系统可用性（usability）的研究却很少。本研究调查了错误消息设计（error message design）和任务类型（task type）对课程注册中错误恢复（error recovery）的影响。44名大学生（M_age = 20.48岁；33名女性，11名男性）完成了一个课程注册模拟，其中包括两个错误任务：候补（waitlisted，即课程已满）和关联（linked，即需要额外课程），以及两种错误消息设计条件（修改后消息设计与原始消息设计）。可用性通过有效性（effectiveness）和效率（efficiency）进行评估。结果表明，虽然错误消息设计之间的可用性没有差异，但与候补任务相比，关联任务导致了更高的错误发生率和花费时间。研究人员的发现有助于更好地理解课程注册系统，并为这些系统的未来设计提供信息。

学生信息系统（Student Information Systems, SISs）是管理课程注册、学费支付、学业记录和咨询等核心功能的管理软件，旨在简化学生大学生涯中的行政流程。尽管SISs在大学中普遍存在，但与学习管理系统（Learning Management Systems, LMS）相比，针对SISs可用性的研究非常有限。错误恢复（error recovery）被定义为检测系统内的偏差、定位原因并纠正系统以恢复状态的过程。在课程注册系统中，错误由界面通过错误消息（error message）报告，用户需诊断具体问题并实施纠正。然而，现有错误消息往往缺少错误恢复步骤，导致学生必须依赖过往经验、系统手册或顾问等外部资源，从而造成恢复成功率的差异。

本研究旨在通过评估课程注册系统，调查学生如何与系统中遇到的错误进行交互并解决错误，以填补SISs可用性研究空白。研究人员开展了一项课程注册模拟实验，考察错误消息设计和任务类型对错误恢复的影响，并探索学生人口统计学特征对任务表现的影响。44名大学生（M_age = 20.48岁；33名女性，11名男性）参与研究。实验包含两种错误任务：候补（waitlisted，即课程已满）和关联（linked，即需要额外注册一门关联课程），以及两种错误消息设计（原始设计与添加恢复步骤的修改设计）。可用性依据有效性和效率评估。

主要研究方法如下：参与者从Old Dominion University（ODU）心理学课程中通过SONA系统招募，并随机分配至原始或修改错误消息条件（组间设计），任务类型顺序经过平衡以控制遗留效应。实验基于Tobii Pro Lab Advanced软件，使用ODU的LEO Online课程注册系统截图，去除可识别信息和学校品牌后构建模拟任务。候补任务包含4个步骤，关联任务包含9个步骤，且需在多种屏幕布局间切换。有效性定义为错误恢复过程中某一步的错误点击次数，效率定义为完成全部试验的平均时长。此外，使用系统可用性量表（System Usability Scale, SUS）和形容词评定量表（Adjective Rating Scale, ARS）收集主观满意度。统计方法包括重复测量方差分析和组间方差分析。

研究结果显示，在有效性方面，原始错误消息条件下候补任务平均错误数为0.68，关联任务为5.82；修改错误消息条件下候补任务为1.05，关联任务为6.14。重复测量方差分析显示，候补任务的有效性显著优于关联任务，F(1, 43) = 153.44, p < .001, partial η² = .781。在效率方面，原始条件下候补任务平均耗时10.70秒，关联任务59.69秒；修改条件下候补任务13.95秒，关联任务72.23秒。关联任务效率同样显著低于候补任务，F(1, 43) = 45.58, p < .001, partial η² = .515。但两种错误消息设计在有效性（F(1, 42) = .678, p = .415）和效率（F(1, 42) = .832, p = .367）上均无显著差异。主观满意度方面，原始设计SUS得分71.14，ARS为5.23；修改设计SUS为71.59，ARS为5.18，均对应“良好”等级。此外，转学生与非转学生在任务绩效综合得分上存在显著差异，F(1, 43) = 8.14, p = .007, partial η² = .162。

接下来总结讨论部分。讨论部分包含两个小标题。第一个小标题为“学生特征对错误恢复的影响”。该部分指出，转学生等特定学生群体在错误