本文是可汗学院于 2024 年 12 月 6 日发布的关于其教学效果的研究结果。可汗学院一直致力于基于学习科学和掌握式教学法为全球学生提供教育，同时也注重对自身产品效果的研究，这些研究结果不仅用于产品改进和制定实施指南，还与学术界、教育工作者、政策制定者和社区领袖共享，以帮助他们做出更明智的数据驱动决策。
可汗学院 2024 年 11 月教学效果结果
作者：博格达・亚姆科文科（Bogdan Yamkovenko），教学效果研究经理；安娜・伯格斯特龙（Anna Bergstrom），可汗学院高级捐赠者沟通经理
一、最新教学效果研究结果
- 单次研究结果
可汗学院与使用我们的 KAD（可汗学院学区）和 MAP 加速器产品的学区进行了多项教学效果研究。根据我们在 2022 – 2023 学年对约 35 万 3 – 8 年级学生的近期研究：
- 按照全国标准化的 MAP 成长评估成绩衡量，每周使用可汗学院 30 分钟以上，或一学年 18 小时以上，与预期学习增益相比约高出 20%。这一结果在不同人口群体中是一致的。（见图 1）
- 样本中约 9%（约 3.3 万）的学生达到了每周 30 分钟以上（或每学年 18 小时）的推荐使用量。
- 这项研究的效应量为 0.36。
- 虽然研究样本中在可汗学院平台上花费时间最多（每学年 18 小时以上）的学生学习增益最大，但使用时间少于推荐量的学生学习也有提高。例如，样本中 15%（5.5 万）在一学年使用可汗学院 9 – 18 小时的学生，与预期学习增益相比约高出 7%。
- 逐年对比结果
这是可汗学院连续第三年进行上述研究，目前我们有大约 22.1 万学生收集了两年或更多年的数据。通过将这些学生与他们自己不同时间的数据进行比较，我们能够进行更深入、更严格的分析，排除诸如积极性高的学生或高于平均水平的教师对学生学习成果的影响等因素。这项纵向分析研究了以下内容：
- 随着学生对可汗学院使用量的增加或减少，学生学习增益如何逐年变化。
- 当学生相对于上一年学习更多或更少技能（技能达到熟练或以上水平）时，MAP 成长测试的增益如何逐年变化。（请注意，在可汗学院平台上，技能水平从尝试、熟悉、熟练到精通。学生通过在练习、测验、单元测试或掌握挑战中正确回答问题来展示他们所学的技能以及当前技能水平。）
严格的纵向研究结果显示： - 相对于学生上一年自己的成绩，每多练习一个达到熟练或精通的技能，学习增益约为 0.5 个百分点。在可汗学院博客上可了解更多信息。（见图 2）
- 样本中约 52%（约 11.5 万）的学生逐年增加了达到熟练或精通的技能数量，而约 48%（10.6 万）的学生与上一年相比减少了所学技能数量。增加达到熟练或精通技能数量的学生学习增益递增，而减少使用的学生学习增益递减。
- 递增学习增益的数量取决于个别学生的学习目标以及逐年达到熟练或精通的额外技能总数。例如，将练习达到熟练或精通的技能数量增加 1 – 15 个（约占样本的 30%，约 6.6 万学生）的学生，平均往往会看到 5 个百分点的增益。那些将练习增加 15 – 30 个技能（约占样本的 10%，2 万学生）的学生，平均往往会看到 15 个百分点的增益。在我们的纵向研究样本中，约 4%（9500）的学生与上一年相比，将所学达到熟练或精通的技能数量增加了 60 个或更多。这些学生通常会看到增益增加约 30 个百分点。对于样本中的普通学生来说，这样的增益相当于学习增加约 20% – 30%。
二、示例 —— 利用可汗学院弥补学生学习差距
为了更好地理解这些结果，根据 NWEA（测试制造商）的数据，一个普通的五年级学生在秋季和春季的 MAP 成长测试之间预计会增加约 10 分。然而，学生通常达不到他们的目标，所以这个学生增加了 8 分。随着时间的推移，如果这种典型的学习速度继续下去，一个普通学生的学习差距可能会增加。
然而，通过使用可汗学院补充课堂学习，一个假设的普通学生可以通过比上一年掌握更多技能来达到甚至超过他们的学习目标，具体方式如下：
考虑一个五年级学生，他学习了可汗学院五年级数学课程的一个单元，并且在该课程的 130 个技能中，除了在其他课程 / 资源中学习的技能外，只完成了很少的技能 ——10 个技能。这个学生在学年结束时，MAP 成长评估的成绩是其五年级目标的 80%，即比秋季评估成绩高约 8 分，但比目标增长水平低 2 分。现在，假设在接下来的一年里，他们使用可汗学院补充他们在核心课程中所学的内容，并在六年级掌握了 50 个技能 —— 与上一年在可汗学院学习的技能相比增加了 40 个技能（上一年在可汗学院学习了 10 个技能）。根据我们的研究发现，每多学习一个达到熟练或精通的技能会使学习增加 0.5 个百分点，我们预计这个学生将向他们的目标靠近 20 个百分点。这是一个相当大的学习量：在可汗学院技能练习带来的 20% 的增量学习，加上这个学生在五年级结束时个人目标的 80%，意味着这个学生在六年级可能会达到 100% 的学习目标。如果同一个学生在同一年里在上述例子中提到的 40 个技能之外还掌握了更多技能，他们甚至可能超过他们的学习目标。
三、基于教学效果研究的组织目标和实施指南
在可汗学院，我们根据教学效果研究结果推断出组织目标，以推动提高学生成绩，并为教育工作者制定实施指南，旨在解决学习差距问题。鉴于大多数学生只能达到其目标增长的约 85%，设定加速学习 30% 的实施指南意味着学生有一条明确的路径来达到甚至超过他们的学习目标。我们专注于让尽可能多的学生深入参与可汗学院，以推动更好的学习成果（包括时间和技能达到熟练），因此我们为以下指标设定了组织目标，并为教育工作者提供了以下实用的实施指南：
- 年度活跃学习者（YVALs）：一学年 18 小时以上或每周 30 分钟以上 | 这条指南是基于多年的教学效果研究，这些研究表明达到这种深度使用可汗学院的学生，与预期学习增益相比约高出 20 – 30%。在我们 2022 – 2023 学年的研究样本中，约 9%（约 3.3 万）的学生成为了 YVALs。
- 年度熟练学习者（YPL）：一学年 60 个以上技能达到熟练或每周 2 个以上技能达到熟练 | 这条实施指南是基于教学效果研究结果，即逐年增加达到熟练或精通的技能数量可使学习提高约 0.5 个百分点。然而，在很多情况下，逐年跟踪达到熟练或精通的技能增益是不实际的。因此，我们建议将 60 个以上技能作为一个简化且实用的替代指标。虽然学生，尤其是那些明显落后的学生，即使练习更少也能看到 30% 的增益，但我们将 60 个以上技能设定为一个严格的基准。今年我们已经开始向我们的学区合作项目中的教育工作者介绍年度熟练学习者指标。
展望未来
我们将继续对我们的核心平台进行其他研究，包括正在与多伦多大学和斯坦福大学合作进行的一项研究，该研究在我们现有研究的基础上采取了额外的步骤，以分离可汗学院对学习成果的影响。此外，为了了解 Khanmigo（可汗学院的学生人工智能导师和教师助手）对学习成果的影响，相关研究也正在进行中。以 Khanmigo 为重点的教学效果研究将通过确定它如何帮助学习者通过可汗学院的内容以及它对学生在可汗学院平台之外的考试成绩的影响，来关注 Khanmigo 对学习的影响程度。
原文标题 Title: Khan Academy Efficacy Results, November 2024
原文链接：https://blog.khanacademy.org/khan-academy-efficacy-results-november-2024/