详细内容或原文请订阅后点击阅览
数据滞后和野心聚合意味着 APP 仍然存在根本性缺陷
由于 OfS 尚未发布第一年之后对其 2020-25 年接入计划的任何监控,Jim Dickinson 根据仪表板评估了 945 个目标 - 发现大多数遗漏的目标和四分之一的目标相反
来源:Wonkhe | 高等教育政策、人物与政治就在一年多前,我在该网站上寻找性能。
我想了解大学如何实现大学与学生办公室 (OfS) 在 2020-21 至 2024-25 入学和参与计划中商定的目标。
当时,我将分析范围限制在罗素集团——部分是为了可管理性,部分是因为该集团的承诺与其绩效之间的不匹配是 OfS 自己在推出计划时讲述的故事。
根据 2022-23 年数据衡量的结果非常令人担忧。
从那时起,发生了两件事。OfS 更新了其访问和参与数据仪表板,涵盖 2023-24 年——大多数计划的倒数第二年。
OfS 继续不发布任何对其签署目标的绩效监控——其于 2022 年 9 月发布的最后一次监控数据涵盖了 2020-21 学年。
所以这次我已经完成了整个事情。该浪潮中每个计划中的每个目标(102 个提供商,总共 945 个目标)均被提取,尽可能与仪表板上的衡量标准进行匹配,并与提供商与监管机构商定的 2023-24 年里程碑以及提供商自己的基准进行比较。
在 945 项中,有 777 项可以通过仪表板进行评估 - 其余的则依赖于仪表板未涵盖的内部数据、调查或措施。
通常的警告适用。如果计划对范围内的学生不明确,我会匹配最接近的仪表板测量(通常是全日制,所有本科生),并且对于许多目标,该计划的基线年份现在不在仪表板发布的系列范围内 - 尽管仅在最干净的匹配上运行数字会产生几乎相同的结果。
结果
在 777 个可评估目标中,488 个(63%)未能达到提供商与 OfS 商定的 2023-24 年里程碑。
谁失望了
将目标按本应提供帮助的学生群体进行划分,结果会变得相当悲惨。
