帕金森“面具脸”趣味康复训练方法

本发明涉及一种训练方法，更具体的说是涉及一种帕金森“面具脸”趣味康复训练方法。

背景技术：

1、在帕金森病运动症状的数字疗法研究领域，相关工作大多基于游戏的形式为帕金森病患者的康复治疗增加趣味体验。林志诚等人[24]利用微软公司的xbox体感游戏对帕金森病患者进行平衡训练，有效改善了患者的四肢协调能力、踝关节的控制能力和身体平衡能力。dauvergne等人[25]开发了一款名为《节奏工作者》的平板游戏，用于帮助帕金森病患者改善运动节律，患者被要求尽可能准确地敲击屏幕上的声音，以适应各种节奏性听觉刺激的节拍。fernández-gonzález等人[26]基于ultraleap的扩展现实设备leap motioncontroller开发了钢琴游戏、抓握游戏等六款电子游戏，旨在模拟帕金森病康复训练中常见的手掌抓握、手指屈伸或手旋后仰等动作。campo-prieto等人[27]通过虚拟现实设备让受试者在数字空间中练习不同的拳击技巧，如防守、刺拳、交叉、勾手、上勾拳等，充分锻炼受试者等躯干、头部和下肢，加强动作协调能力。实验结果表明沉浸式虚拟现实视频游戏对轻度-中度帕金森病患者的辅助治疗是可行的，具有较高的可用性和患者满意度。类似地，上述工作过度依赖专用设备，仍然存在使用成本高、受众群体小的问题，不适合我国国情。如何基于手机等广泛普及的移动设备，设计群众用得起、易上手的数字疗法应用软件，是研发帕金森病早期干预治疗新技术面临的一大挑战，同时现有的训练方法不具有足够的趣味性，导致患者训练的积极度不是很高。

技术实现思路

1、针对现有技术存在的不足，本发明的目的在于提供一种易上手且趣味性高的帕金森“面具脸”趣味康复训练方法。

2、为实现上述目的，本发明提供了如下技术方案：一种帕金森“面具脸”趣味康复训练方法，其特征在于：包括如下步骤：

3、步骤一，开始训练，移动设备采集人脸图像数据，识别人的面部动作；

4、步骤二，根据面部动作在移动设备上显示小球图像，识别人脸并判断是否出现人脸部位与小球是否碰撞，若判断出现碰撞则动作正确，语音反馈成功，之后继续下一步，若判断未出现碰撞，返回步骤一重新判定；

5、步骤三，判断是否做完所有动作，若是则结束本次训练，若否则返回步骤一进行下一个动作判定。

6、作为本发明的进一步改进，所述步骤二中判断人脸与小球是否碰撞的具体方式为：通过faceapi读取人脸关键点，得到相应动作需要进行交互的面部关键点的坐标，计算当前面部关键点的坐标和小球的坐标是否发生了碰撞。

7、作为本发明的进一步改进，所述步骤一中面部动作包括皱眉运动、眼肌运动、鼓腮练习、皱鼻子、唇部练习和发音训练；

8、其中，发音训练采用接入百度语音api，对用户的发音进行识别，如果用户的发音有问题，或者是发音时长没有达到要求，语音提示用户，用户重新进行发音训练。

9、作为本发明的进一步改进，所述步骤一中识别人的面部动作的具体步骤如下：首先，利用视频轨道获取患者实时的面部信息，使用faceapi库中提供的人脸识别模型和人脸五官定位模型来对当前图片的人脸进行处理，人脸识别模型会首先识别传入的视频流画面中的人脸，并选取最高可信度的那一张人脸，并将该人脸输入人脸五官定位模型获取该人脸各个部位的锚点，获取锚点之后，将截取后的人脸输入至面部单元识别模型中，使其能够实时分析用户的面部表情并准确识别不同的面部动作。

10、作为本发明的进一步改进，所述步骤二中在判断未出现碰撞后，面部ai助手对用户进行语音提示，并再次演示标准的面部动作以供用户再观看提示以后再次尝试练习。

11、本发明的有益效果，通过步骤一的设置，便可有效的实现采集人脸图像数据，同时识别人的面部动作，而通过步骤二的设置，便可有效的实现在移动设备上根据人的面部动作显示出小球，然后通过引导人脸触碰小球的方式来实现训练，因而相比于现有技术中的方式，趣味性更强。

技术特征：

1.一种帕金森“面具脸”趣味康复训练方法，其特征在于：包括如下步骤：

2.根据权利要求1所述的帕金森“面具脸”趣味康复训练方法，其特征在于：所述步骤二中判断人脸与小球是否碰撞的具体方式为：通过faceapi读取人脸关键点，得到相应动作需要进行交互的面部关键点的坐标，计算当前面部关键点的坐标和小球的坐标是否发生了碰撞。

3.根据权利要求2所述的帕金森“面具脸”趣味康复训练方法，其特征在于：所述步骤一中面部动作包括皱眉运动、眼肌运动、鼓腮练习、皱鼻子、唇部练习和发音训练；

4.根据权利要求3所述的帕金森“面具脸”趣味康复训练方法，其特征在于：所述步骤一中识别人的面部动作的具体步骤如下：首先，利用视频轨道获取患者实时的面部信息，使用faceapi库中提供的人脸识别模型和人脸五官定位模型来对当前图片的人脸进行处理，人脸识别模型会首先识别传入的视频流画面中的人脸，并选取最高可信度的那一张人脸，并将该人脸输入人脸五官定位模型获取该人脸各个部位的锚点，获取锚点之后，将截取后的人脸输入至面部单元识别模型中，使其能够实时分析用户的面部表情并准确识别不同的面部动作。

5.根据权利要求4所述的帕金森“面具脸”趣味康复训练方法，其特征在于：所述步骤二中在判断未出现碰撞后，面部ai助手对用户进行语音提示，并再次演示标准的面部动作以供用户再观看提示以后再次尝试练习。

技术总结本发明公开了一种帕金森“面具脸”趣味康复训练方法，包括如下步骤：步骤一，开始训练，移动设备采集人脸图像数据，识别人的面部动作；步骤二，根据面部动作在移动设备上显示小球图像，识别人脸并判断是否出现人脸部位与小球是否碰撞，若判断出现碰撞则动作正确，语音反馈成功，之后继续下一步，若判断未出现碰撞，返回步骤一重新判定；步骤三，判断是否做完所有动作，若是则结束本次训练，若否则返回步骤一进行下一个动作判定。本发明的帕金森“面具脸”趣味康复训练方法，通过移动设备便可实现对于人脸进行识别然后反馈训练了，且采用了小球辅助训练，大大的增加了训练的趣味性。技术研发人员：亓旭晨,张洁,林博,徐荥璟,殷嘉懿,史路峰,唐子棋,黄焕受保护的技术使用者：浙江大学医学院附属邵逸夫医院技术研发日：技术公布日：2024/6/11