失语症患者需要高强度的语言训练以恢复语言能力,但人类治疗师和相关软件尚无法充分满足他们的训练需求。阿姆斯特丹自由大学 Minkelen 等学者探索了使用社交机器人 NAO 为失语症患者提供额外语言训练的可能,相关成果发表于国际社交机器人杂志2022年8月刊。
理论优势
社交机器人使得失语症患者能在家中独立进行语言训练。相较于基于屏幕的练习软件,社交机器人拥有以下三大优势:
一,实体体现。与屏幕上的机器人形象相比,实体机器人更能赢得用户信赖,并且能够带来更高的任务参与度和更愉快的互动体验,进而产生更高的学习收益。
二,个性化治疗。社交机器人能满足用户的自主性,提供积极反馈,并通过个性化的互动与用户建立联系。换而言之,社交机器人能够很大程度模仿人类治疗师,根据病人表现调整制定治疗方案。
三,多模态交流。社交机器人可以同时使用语音、手势和面部表情,与病人进行对话训练。社交机器人还可以识别人类的手势,可以与手势识别算法结合,识别失语症病人用于弥补语言缺陷的常用手势
实验过程
研究人员抽样选取了患有轻度至中度慢性表达性失语症患者展开实验。在完成设备调试与实验介绍后,NAO 会开展以下六段程序交互:
(1)NAO 解释对话模式;
(2)研究人员向参与者提出有关“假期”的问题;
(3)NAO 宣布将话题转换为“工作”,并询问参与者目前是否有工作——该话题意在考察参与者对现在时或过去时的掌握;
(4)NAO 询问参与者是否常用替代和辅助交流形式(AAC),并鼓励他们在接下来的对话中使用AAC;
(5)NAO 询问参与者的工作;
(6)NAO 以感谢参与者结束对话。
关于“假期”和“工作”问题的数量和顺序取决于参与者的回答。例如,参与者在一个答案中已经透露了他在哪里和谁一起去度假,那么后续便会忽略相关问题。
反馈结果
研究人员通过观察分析、主题分析和后续问卷对参与者的训练满意度进行调研。总体上参与者对使用 NAO 进行语言训练持积极态度。他们认为 NAO 是令人愉快的、有帮助的,也提出了一些后续改进建议。
73%的参与者强调,和机器人交谈较为容易,因为机器人语速可控制,给了他们充分的反应时间。机器人也不会做出评判,减轻了患者在检索单词时的压力。
参与者7:但是慢慢地,慢慢地。
研究人员:机器人说话慢吗?
参与者7:是的,很好。
参与者4:嗯,对我来说是缓慢的。这很好。太快对我来说太难了。
研究人员:所以,你的意思是犯错误没关系,因为它只是个机器人?
参与者11:是的,正确。
参与者6:你也不会感到尴尬,因为那样它就安全了,嗯,因为那样它就安全了,嗯。
73%的参与者表示,除了特定的语言治疗外,他们希望增加平时练习语言使用的频率,特别是独处时需要一个对话伙伴来进行语言训练。社交机器人可以让他们根据个人需要在频率和练习时间上进行调整。
改进建议
根据以上反馈,研究人员也为用于语言训练的社交机器人提出了两点建议:
(1)提供更加个性化的反馈
社交机器人可以根据更加先进且针对性的交互模型,实时检测用户何时不再参与对话并做出分析判断,及时调整训练方法,保持失语症患者在语言实践中的自主性。
(2)理解替代和补充性沟通形式(AAC)
失语症患者经常使用AAC来支持语言输出,与常人的表达方式略有不同,有时较难识别。社交机器人可对AAC进行专题学习,更好地理解失语症患者所表达的含义。
Reference: https://link.springer.com/article/10.1007/s12369-022-00908-8