机器人、VR与游戏如何为自闭症患者打开“社交之门”?
2026-07-17
21

自闭症谱系障碍(ASD)是一种复杂的神经和发育障碍,患者通常在社交沟通上面临困难,并伴有刻板、重复的行为模式。对于许多自闭症儿童来说,由于难以理解他人的情绪和社交信号,往往会感到孤独,甚至因为焦虑而产生挫败感。传统的康复治疗虽然有效,但需要耗费大量的时间和高昂的费用,且高度依赖专业理疗师的个人经验。
近年来,随着计算机、虚拟现实(VR)和机器人技术的飞速发展,科学家们开始尝试用一种全新的“工程学”视角来辅助自闭症的诊断与治疗。这类科技工具不仅能大幅降低治疗成本,还能提供稳定、可控的治疗环境,让康复训练变得像玩游戏一样有趣。

工程师眼中,所有用于自闭症研究的科技系统,本质上都可以被看作是一个“人机交互系统”。论文通过图1向我们展示了这个系统的基本运作逻辑。整个系统分为两大部分:
输出端(视听组件):机器通过屏幕或机器人向患者发出特定的画面、声音或动作(即“刺激”)。
输入端(传感组件):机器通过各种传感器捕捉患者的反应。在高级的系统中,还会有一个反馈回路(Feedback Loop)与分析模块,系统能够根据患者的反应,实时、动态地调整下一步要呈现的内容。
这种设计的精妙之处在于不仅能保证每次治疗的连贯性和一致性,还能把复杂的社交场景拆解成一个个单一的元素,循序渐进地引导患者。

文献中指出,为了向自闭症患者传递康复训练的内容,研究人员开发了三种形态的科技工具。根据论文图3的分类,这三大形式虽然各有侧重,但又存在一定的技术重叠:
电脑与移动设备(功能性游戏):这是最普及的方式。通过在平板电脑或普通电脑上运行“游戏(Serious Games)”,患者可以通过触摸屏随时随地进行训练。例如,有些游戏会在屏幕上播放一段真人视频,然后弹出一个表情特写,要求患者识别出这是“高兴”还是“悲伤”。这类游戏通常色彩简洁、目标明确,且包含丰富的正向反馈(如笑脸或奖励音效),以避免给患者带来感官超载。
虚拟现实系统(VR):通过头戴式显示器(如Oculus Rift)或3D屏幕,系统可以为患者构建一个沉浸式的虚拟环境(如虚拟教室)。在这些环境里,会有虚拟的“化身”与患者进行对话和互动。研究发现,相比于真人,带有夸张面部表情的动画化身更能吸引自闭症儿童的注意力,并引发积极的非语言反馈。
社交机器人:这是一种拥有实体的互动方式。例如人形机器人Nao和Zeno,或者像鹦鹉一样的非人形机器人RoboParrot。机器人的优势在于它们具有真实的物理形态,能够进行物理空间内的联合注意力训练和模仿训练。

有了丰富的输出方式,系统还需要敏锐的“感知能力”来收集患者的反应。 论文中图4详细列举了系统收集数据的多种“工具”:
基础输入:键盘、鼠标或触摸屏点击。
运动与视线追踪:利用眼动仪(追踪患者在看哪里)、深度传感器(如Kinect捕捉肢体动作)以及面部表情追踪。
生理数据采集:通过可穿戴设备收集心电图(ECG)、脑电图(EEG)、皮肤电活动(EDA)等生理指标。因为生理特征能真实反映出一个人的焦虑程度或注意力水平。
语音与视频:通过麦克风和摄像头记录患者的语音指令和行为表现。
实验案例:在某项使用虚拟现实技术的实验中,系统引入了“眼动追踪”技术。当虚拟场景中的化身向患者提问时,如果系统检测到患者的视线没有集中在化身上,化身就会在6秒内逐渐变透明(淡出)。只有当患者重新看向化身时,它才会恢复原貌。这种完全自动化的互动,有效地训练了患者的社交注意力。
尽管科技在自闭症的辅助治疗上展现了巨大的潜力,但研究人员也客观地指出了当前依旧存在的问题。目前,许多看似智能的机器人和VR系统并没有实现真正的“全自动”。大量的实验案例中,系统其实采用了Wizard of Oz的模式——即机器人的动作、说话的内容,实际上是由一位躲在幕后的专业理疗师通过电脑远程手动控制的。
此外,评估科技干预的长期有效性仍然是一个挑战。虽然短期内患者在模仿能力、情感识别上有所提高,但这些在“数字乐园”里学到的技能,能否顺利迁移到现实复杂的人际交往中,还需要更多长期的临床追踪研究。
学者介绍:赵文兵,美国克利夫兰州立大学电气与计算机工程系教授。研究主要集中在可靠分布式系统、区块链与容错计算,同时开展面向智能健康的应用研究,包括人体动作识别、计算机视觉以及人机交互相关技术。
ORCID:0000-0002-3202-1127
DOI:10.3390/app7101051