Yohan Lee，Riiid Labs 首席战略官 – 采访系列

Yohan Lee 是 Riiid Labs 的首席战略官，Riiid Labs 是一家领先的全方位验证和数据驱动的 AI 技术解决方案提供商。他们与教育、技能培训和技术领域的全球领导者合作，创建更好的学习体验。他们使用 AI 帮助学习者以最快、最有效的方式实现目标。

您最初被 AI 所吸引的原因是什么？

Riiid 的关注点。Riiid 采取了一个严肃的公司所应有的合理和鼓舞人心的步骤。每一步都是合理和鼓舞人心的。对于其 AI，公司从协同过滤方法开始，逐步改进其算法，直到达到最先进的 Transformer 模型，并具有其独特的演化。公司不断发布富有深意的论文，展示了其专注、探索和想象力。公司的应用程序成功地将用户转化并实现了货币化，这表明了强大的市场接受度。业务从 B2C 扩展到 B2B 维度，增加了额外的测试准备工具和房地产经纪人应用程序。然后，它发布了最大的教育数据集，以启动更大的创新并创建 AIEd 社区（EdNet）。这些都是一个专注的公司所采取的步骤，这些步骤只有大公司才会采取。最后，其公开的资金轮次是对公司投资潜力的强烈反映，表明了公司迅速成为独角兽的潜力。

在您之前的角色中，您是 Google Brain 的机器智能和健康数据科学领导者，您曾经参与过哪些项目？

我领导了产品部署：即如何设计、构建、测量、系统测试床，以进行现实世界的证据研究。这是一个高级测试床建设、研究策略和高级系统设计与实施的结合。我不是一名工程师，但我已经成为多年来多个云平台上的认证专业云架构师。因此，这是一个自然的适应，特别是考虑到信息安全和隐私要求对于 PHI 和弱势群体（特别是儿童）。

许多时候，技术准备之间的伙伴和技术巨头存在差异，以达到规模。这就是我推动规模的地方。使自组装技术基础设施设计用于 ML 引擎，成本仅为 1/10，并在延迟和成本方面实现大规模并行计算。

将预测算法提供给我们的合作伙伴作为 AIaaS，一直很令人兴奋。

自 2020 年 8 月以来，您一直是 Riiid Labs 的战略副总裁，您能解释一下 Riiid Labs 究竟是什么吗？

Riiid Labs 是教育领域 AI 解决方案的全球领导者。Riiid Labs 是其母公司 Riiid 的全球分支，成立于硅谷，旨在建立在 Riiid 亚洲成功的基础上，并将其业务扩展到美国、南美洲、中东和其他地区。我们由 AI 研究员、数据科学家、工程师和业务开发人员组成，与各个垂直领域的合作伙伴合作，重新思考传统的学习方式，通过扩展 Riiid 的 AI 能力。无论是为南美洲大学入学考试创建个性化的测试准备移动应用程序，还是为韩国一家大型企业集团的保险代理人培训创建 AI 教练模块，我们都为 B2C/B2B/B2G 客户提供具有我们专有技术的 AI，分析用户的学习行为数据，预测下一个答案选择，并推荐个性化的学习路径，最终最大化一个人的学习潜力。我们已经推出了几个产品，包括 Santa，一款用于流行英语专业考试 Test of English for International Communication (TOEIC) 的移动测试准备应用程序，该应用程序已被韩国和日本的 200 多万学生使用。我们还在韩国与 Kaplan 合作发布了 GMAT 准备应用程序，并在埃及、土耳其、阿联酋、约旦和沙特阿拉伯与 ConnecME 合作发布了 ACT 准备应用程序。Riiid 目前正在与来自私营和公共部门的广泛客户谈判，以实施我们的 AI 解决方案用于教育评估、学习和培训。

AI 工具如何成为教育民主化的重要一步？

根据 UN 的说法，即使在冠状病毒危机之前，预测显示 2020 年将有超过 2 亿儿童无法上学，而且到 2030 年，只有 60% 的年轻人将完成中等教育。发展中国家的一半儿童离开学校时没有任何适合工作场所的资格。教育的“一刀切”的方法和高风险的标准化测试评估未能满足教育促进社会人才成长的预期作用。

在韩国和美国等发达经济体中，富裕社区的学校预算远远大于贫困社区。因此，富裕的父母会额外投资于私人辅导、大学咨询、测试准备、私人体育教练和课外学习经验，这扩大了他们的孩子与其他孩子之间的差距。这意味着贫困社区的学生往往有较少经验的老师、较少的技术访问权限、在学校和家中的互联网访问受限，可能无法获得大学申请建议。在美国，一个出生在富裕家庭的孩子比出生在贫穷家庭的孩子更有可能完成大学学位。即使在学术能力保持不变的情况下，富裕的孩子也更有可能上大学并完成学位。这也对经济增长有影响。当一个社会的天赋和潜力广泛分布时，但机会不均等时，劳动力市场和经济就无法高效地将天赋与就业机会匹配，这会减慢创新步伐，并损害国家的生产力和经济增长。

根据大量数据，AI 可以评估和理解每个学生的知识水平和独特的学习行为，并提供个性化的内容，以帮助学生达到每个学习目标。AI 是永远耐心的，可以以远低于私人导师的成本为每个人提供个性化的关注。任何拥有互联网连接和智能手机的学生都可以参与到引人入胜的个性化学习体验中，无论他们居住在哪里。AI 还可以帮助老师个性化学生的学习体验，减少老师在重复任务上花费的时间，并将这段时间用于提供个性化的关注和学习资源，这些资源可以在 24/7 的时间内为每个学生提供，无论学校是否开放。

您能否讨论首届全球人工智能教育（AIEd）挑战赛的愿景？

世界需要一个新的教育范式来克服当前的教育危机。在线交互的 AI 驱动学习解决方案可以为每个人提供个性化的关注，以远低于私人导师的成本，无论是用于独立学习还是融入教师主导的学习体验中。我们真正相信我们的 AI 教育愿景，并相信我们可以改变教育并改善学生的生活。但我们知道我们无法单独实现这一愿景。我们需要更广泛的 AI 社区和教育行业接受我们的想法并参与其中。去年，Riiid 公开发布了 EdNet，一個大规模的分层数据集，收集了来自 Riiid 的 AI 辅导系统的多样化学生活动。它包含了 1310 万多次与 78 万多名真实学生的交互数据。这是迄今为止公开发布的 AI 教育数据集中最大的。我们希望该领域的最佳人才使用这些数据找到创新解决方案，以帮助解决教育领域的全球挑战。因此，Riiid 发起了其首届 AIEd 挑战赛，这是一个全球挑战，旨在使用 EdNet 创建和评估知识追踪算法。我们相信，通过联合努力，我们可以产生更大的影响，并进一步加速 AI 启用的教育趋势。树立榜样对于领导和激励他人是必要的。

AIEd 的结果是什么？

挑战赛于 2020 年 10 月 6 日至 2021 年 1 月 8 日在 Google 的 Kaggle 平台上举行，Kaggle 是一个数据科学家和机器学习从业者的在线社区。

• 共有 3,395 个团队来自 90 个国家参加了挑战赛，总奖金为 10 万美元，使其成为 2020 年 Kaggle 算法竞赛中任何商业实体举办的竞赛中参与团队最多的竞赛。
• 有 52 名 Kaggle 的 270 名大师参加了比赛，这是过去表现最好的 Kaggle 竞争者中参加比例最高的。相比之下，2020 年的竞赛平均只有 25 名大师参加。
• 通过这一挑战，提交了 64,678 个不同的创造性知识追踪模型。
• 来自韩国、ญี่ปุ่น和西班牙的团队获得了前三名，分别获得了 5 万美元、3 万美元和 1 万美元的奖励。前三名团队在由 Riiid 研究人员举办和组织的 AAAI-2021 工作坊上介绍了他们的模型，主题为“AI 教育：想象带有 AI 的后疫情教育”。
• 所有获奖解决方案都使用了 Transformer，一种基于注意力的模型，最初用于机器翻译 [AAYN]（Vaswani 等），并被 Riiid 研究人员采用。Transformer 的价值非常明显，Kagglers 以学术上和实践上有趣的方式使用它们。这些是对 Transformer 的创造性应用，这些应用出乎我们的研究人员的意料。我们受到鼓舞，认为提供这样的平台可以促进 AI 教育中如此多样化的实验方法。我们相信这将导致可应用技术的进步，这是对这一坚实研究基础的扩展。

AI 如何最好地加速个性化学习？

总之，基于深度学习算法的 AI 技术分析用户数据和内容，预测分数和行为，并根据这些洞察力推荐个性化的学习计划实时进行。

Riiid 的核心 AI 技术就是这样做的：1）知识追踪，2）分数预测，3）个性化推荐。

1. 知识追踪：知识追踪是 AI 教育领域的基本任务。了解学生在某一时刻的知识和不知道的内容，为构建最优学习路径提供了基础。并且该模型能够预测学习者对任何和所有未解决问题的正确答案。我们的基于深度学习的知识追踪模型，灵感来自 Google Transformer，预测学生是否会正确或错误地回答问题，准确率最高。
2. 分数预测模型：分数预测模型预测学生在学习过程中的成绩。我们的模型预测学生的成绩，平均预测误差为 ±5%，可以广泛表达为 95% 的准确率。评估为学生的知识状态提供了反馈，使得实时学习调整成为可能。并且它使学生能够认识到他们的进步和成就，这促进了自我评估和实践。
3. 推荐系统：基于知识追踪和分数预测模型，我们为学习者提供了最需要改进的项目。设计推荐系统并非总是简单的，它需要大量的考虑和研究，以了解什么对学习者最好。Riiid 开发了 有效标准化考试准备推荐（RCES），一种 AI 模型，推荐不仅能最大化预期分数，还能确保学习发生。它避免了仅仅为了提高测试分数而不真正进行学习的目标，反映了从错误回答问题的解决方案中获得新知识的影响。

您能否讨论 Riiid Santa 应用程序及其用户应该期待的内容？

Riiid 提供 Santa，一款用于流行英语专业考试 Test of English for International Communication (TOEIC) 的移动测试准备应用程序。该应用程序具有 Riiid 的专有 AI 技术，分析用户数据和内容，预测分数和行为，并实时推荐个性化的学习计划，以帮助用户优化学习潜力。该应用程序已被韩国和日本的 250 万名学生使用，并在日本和韩国的教育应用程序中排名第一。在一年的用户数据中，平均分数在仅 20 小时的学习后增加了 165 分（满分 990 分）。

您是否还有其他关于 Riiid 或 Riiid Labs 的信息想要分享？

在仅仅六年时间内，我们仅仅触及了 AI 教育的无限前景。我们已经看到我们如何改变传统的标准化测试学习方法。但我们也看到了衡量学生能力的更有意义的方法的可能性。我们真正相信我们是领导这场革命的最佳人选。

我们的信念是，只有通过了解学生的日常学习行为和路径，我们才能评估学生的真正潜力并相应地优化他们的学习体验。这在之前是不可能的。但是有了 AI，我们可以分析当前学习者的水平，并实时提供个性化的教学，这适合个人的需求。我们可以不断激励他们并跟踪他们的进步。我们可以让每个学习者按照自己的方式，以自己的节奏成长，这是当前体系所不具备的。通过这种方法，我们可以真正解锁一个人的学习潜力。

我们的愿景不仅仅局限于测试准备服务，但我们才刚刚开始。总结性评估，即通过一次性测试评估学习者，并不是评估和有效学习的最佳工具。并且，由于 Covid19，它现在在物理上是无效的，我们看到了对有效和实用的形成性评估工具的巨大市场需求。这就是为什么 Riiid 目前正在开发一个基于深度学习的、领域无关的“能力测量模型”，称为“Riiid-Score”。我们相信我们将通过支持形成性学习来改变教育的核心，即不断优化教学和学习体验。我们相信这是解锁每个个体潜力的基本步骤。

感谢这次精彩的采访，希望读者能够通过访问 Riiid Labs 来了解更多信息。