跨学科探索一直是杨少诗教授学术研究中的关键要素,但直到新冠疫情发生以后及参访一家机械人公司,才使得这一愿景变为现实。
对年幼的英语学习者来说,课堂上与英语老师的紧密互动至关重要。随着疫情导致的社交距离严重影响了教师与学生间的互动,语言教育中对创新解决方案的迫切需求急剧增加。杨少诗教授和她的突破性创作 — Joey应运而生,这是一款专为4至9岁孩子教授儿童英语的互动社交机械人。

Joey配备了先进的语音识别和手势检测技术,并由生成式人工智能驱动,旨在令语言学习变得亲切平易,饶有趣味。凭着丰富表情,灵活手臂,以及迷人的AI生成视像,Joey能模仿人类互动,为幼儿园孩童与年幼学习者,包括有特殊教育需要的孩子,提供沉浸式、个性化的学习体验,满足他们多样化的需求。
Joey设计的核心是三个互动功能,彻底改变了儿童发展听力理解、口语表达和记忆保留等技能的方式。「听力」功能是向孩子敍述动人故事,并配以生动视象。「共述」功能则是通过邀请孩子回答问题,参与故事讲述。最后,「重述」功能则使孩子可以独立复述故事,并在他们需要时提供引导问题支持他们。
从硬件和软件的开发设计到精密搭配,再到跟年幼英语学习者首次互动的激动时刻,这款社交机器人充分体现了研究团队的心血结晶。它展示了可用资源与宏大蓝图之间的微妙平衡,以及技术性能与用户体验之间深思熟虑的妥协。每一项功能都反映了对教育的热情,将创意与实用性完美结合,创造出一种激发好奇心和学习乐趣的奇妙体验。
三年以来,这项研究囊括多项国际大奖,如今正进入令人振奋的新阶段。杨教授与她在香港科学园的团队一直根据用户反馈和Joey持续的校园探访中所收集的信息,不断完善其设计。
作为研究学者,杨教授无时不在寻找灵感。在她而言,语言教育与心理学研究是一个「持续演化、激动人心的创作过程。」随着第二代和第三代社交机械人逐步开发,这位拥有十多年研究经验的资深学者预见Joey的应用将超越语言学的范畴,延伸至其他教育领域。
看着她自信从容的微笑,显然,这个研究项目的潜能还未达极限。这只是一个开始。
更多知识转化文章