基于错误相关电位的眼动判别确认方法、系统、介质及产品

本发明涉及眼动控制，特别是涉及一种基于错误相关电位的眼动判别确认方法、系统、介质及产品。

背景技术：

1、眼动指令是指通过监测用户眼球运动来获取用户意图或控制系统的指令。眼动指令可以用于改善人机交互系统和用户界面设计，应用于康复辅助技术和无障碍设施，以及医疗诊断、心理学和神经科学研究。眼动指令需要的参数有眼球位置参数、注视位置、视线移动速度、注视持续时间、眨眼频率等。

2、错误相关电位是一种通过记录大脑在某种认知任务中产生的事件相关电位来研究认知过程中错误处理的神经生理指标。当个体在执行任务时出现错误时，大脑会产生特定的电位响应，这种响应可以通过脑电图或其他神经成像技术进行测量和分析。错误相关电位通常分为两种主要类型：错误相关负性(error-related negativity，ern)和错误正性(errorpositivity，pe)。ern通常出现在个体意识到自己犯错后的约100毫秒内，是一种负向电位。它主要在前额叶区域(尤其是前扣带皮层)观察到，并且与个体的错误监测和错误处理有关。ern的幅度通常与错误严重性相关，即当错误更显著或者更罕见时，ern的幅度更大。pe是在ern后出现的，通常在错误发生后200毫秒至400毫秒之间，是一种正向电位。pe主要在中央和顶叶区域观察到，与错误的感知和后续的错误调整相关。错误相关电位的研究对于理解大脑在认知任务中错误处理和错误调节的机制具有重要意义。

3、眼动控制技术是一种直接用眼部信息控制执行机构的新型人机交互技术，但由于眼动指令判别的困难存在个体差异、环境干扰、数据噪声、个体对眼球的控制能力以及眼球的自然移动。现有眼控技术的眼动指令，可靠性和精准度较差，无法实现自适应调节，未存在对眼动指令的反馈校正，极有可能对控制系统输出错误指令，使其执行错误的响应，致使目前的眼控设备很难投入到实际应用。

技术实现思路

1、本发明的目的是提供一种基于错误相关电位的眼动判别确认方法、系统、介质及产品，可提高眼动控制技术的安全性和可靠性。

2、为实现上述目的，本发明提供了如下方案：

3、一种基于错误相关电位的眼动判别确认方法包括：

4、获取同一时刻的眼动数据和脑电图数据；所述眼动数据为第一数据或第二数据；所述第一数据包括人眼和虹膜；所述第二数据包括人眼；所述脑电图数据包括多个脑电数据；

5、将所述眼动数据输入至检测模型中对所述眼动数据进行识别检测，得到检测结果；所述检测结果为第一检测结果或第二检测结果；所述第一检测结果包括人眼检测框、虹膜检测框左上角坐标系和虹膜检测框右上角坐标系；所述第二检测结果包括人眼检测框；所述检测模型是基于yolov7模型构建的；

6、基于所述检测结果确定眼部动作指令；

7、通过脑电图数据对所述眼部动作指令进行判别，得到判别结果。

8、一种计算机系统，包括：存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序以实现上述所述的基于错误相关电位的眼动判别确认方法。

9、一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述所述的基于错误相关电位的眼动判别确认方法。

10、一种计算机程序产品，包括计算机程序，该计算机程序被处理器执行时实现上述所述的基于错误相关电位的眼动判别确认方法。

11、本发明公开一种基于错误相关电位的眼动判别确认方法、系统、介质及产品，首先获取同一时刻的眼动数据和脑电图数据；并采用检测模型对眼动数据进行识别检测；基于所述检测结果确定眼部动作指令；最后通过脑电图数据对所述眼部动作指令进行判别，若判别眼部动作指令不存在错误则执行，若判别眼部动作指令存在错误则重新采集同一时刻的眼动数据和脑电图数据，本发明通过脑电图数据实时检测基于眼动数据得到的眼部动作指令，可以提高眼动控制技术的安全性和可靠性。

技术特征：

1.一种基于错误相关电位的眼动判别确认方法，其特征在于，所述方法包括：

2.根据权利要求1所述的基于错误相关电位的眼动判别确认方法，其特征在于，基于所述检测结果确定眼部动作指令，具体包括：

3.根据权利要求2所述的基于错误相关电位的眼动判别确认方法，其特征在于，基于虹膜检测框中心位置与人眼检测框的位置关系确定眼部动作指令，具体包括：

4.根据权利要求1所述的基于错误相关电位的眼动判别确认方法，其特征在于，通过脑电图数据对所述眼部动作指令进行判别，得到判别结果，具体包括：

5.根据权利要求4所述的基于错误相关电位的眼动判别确认方法，其特征在于，通过错误相关电位对所述眼部动作指令进行判别，得到判别结果，具体包括：

6.一种计算机系统，包括：存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序以实现权利要求1-5中任一项所述基于错误相关电位的眼动判别确认方法。

7.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1-5中任一项所述基于错误相关电位的眼动判别确认方法。

8.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1-5中任一项所述基于错误相关电位的眼动判别确认方法。

技术总结本发明公开一种基于错误相关电位的眼动判别确认方法、系统、介质及产品，涉及眼动控制技术领域，方法包括：获取同一时刻的眼动数据和脑电图数据；将所述眼动数据输入至检测模型中对所述眼动数据进行识别检测，得到检测结果；所述检测结果为第一检测结果或第二检测结果；所述第一检测结果包括人眼检测框、虹膜检测框左上角坐标系和虹膜检测框右上角坐标系；所述第二检测结果包括人眼检测框；所述检测模型是基于YOLOv7模型构建的；基于所述检测结果确定眼部动作指令；通过脑电图数据对所述眼部动作指令进行判别，得到判别结果，本发明能够提高眼动控制技术的安全性和可靠性。技术研发人员：孙向阳,孔博笃,熊兴伟,王羿,张宁,蔡子涵,李嘉旭,周宇受保护的技术使用者：长春大学技术研发日：技术公布日：2024/9/9