跨學科探索一直是楊少詩教授學術研究中的關鍵要素,但直到新冠疫情發生以後及參訪一家機械人公司,才使得這一願景變為現實。
對年幼的英語學習者來說,課堂上與英語老師的緊密互動至關重要。随着疫情導致的社交距離嚴重影響了教師與學生間的互動,語言教育中對創新解決方案的迫切需求急劇增加。楊少詩教授和她的突破性創作 — Joey應運而生,這是一款專為4至9歲孩子教授兒童英語的互動社交機械人。

Joey配備了先進的語音識別和手勢檢測技術,並由生成式人工智能驅動,旨在令語言學習變得親切平易,饒有趣味。憑著豐富表情,靈活手臂,以及迷人的AI生成視像,Joey能模仿人類互動,為幼兒園孩童與年幼學習者,包括有特殊教育需要的孩子,提供沉浸式、個性化的學習體驗,滿足他們多樣化的需求。
Joey設計的核心是三個互動功能,徹底改變了兒童發展聽力理解、口語表達和記憶保留等技能的方式。「聽力」功能是向孩子敍述動人故事,並配以生動視象。「共述」功能則是通過邀請孩子回答問題,參與故事講述。最後,「重述」功能則使孩子可以獨立複述故事,並在他們需要時提供引導問題支持他們。
從硬件和軟件的開發設計到精密搭配,再到跟年幼英語學習者首次互動的激動時刻,這款社交機器人充分體現了研究團隊的心血結晶。它展示了可用資源與宏大藍圖之間的微妙平衡,以及技術性能與用戶體驗之間深思熟慮的妥協。每一項功能都反映了對教育的熱情,將創意與實用性完美結合,創造出一種激發好奇心和學習樂趣的奇妙體驗。
三年以來,這項研究囊括多項國際大獎,如今正進入令人振奮的新階段。楊教授與她在香港科學園的團隊一直根據用戶反饋和Joey持續的校園探訪中所收集的信息,不斷完善其設計。
作為研究學者,楊教授無時不在尋找靈感。在她而言,語言教育與心理學研究是一個「持續演化、激動人心的創作過程。」隨著第二代和第三代社交機械人逐步開發,這位擁有十多年研究經驗的資深學者預見Joey的應用將超越語言學的範疇,延伸至其他教育領域。
看著她自信從容的微笑,顯然,這個研究項目的潛能還未達極限。這只是一個開始。
更多知識轉化文章