基于眼动追踪的控制方法、装置、设备及介质与流程

本申请涉及可穿戴，更具体地，涉及一种基于眼动追踪的控制方法、装置、设备及介质。

背景技术：

1、当前，智能眼镜正处于一个迅猛发展的阶段，各类创新产品层出不穷。随着这一趋势，具备拍照功能的智能眼镜被越来越广泛地应用于各个领域，逐渐成为市场上的主流产品之一。

2、对于具有拍照功能的智能眼镜而言，佩戴者希望拍摄某一特定方向的图像时，需要该佩戴者头部转动到该特定方向，而这会导致佩戴者的佩戴体验降低。

技术实现思路

1、本申请的一个目的是提供一种基于眼动追踪的控制的新技术方案。

2、根据本申请的第一方面，提供了一种基于眼动追踪的控制方法，应用于头戴设备，所述头戴设备包括眼动追踪装置及用于采集外界环境图像的摄像装置，所述摄像装置的摄像方向可调节，所述方法包括：

3、获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像；

4、根据所述第一眼部图像，确定所述佩戴者的眼球转动方向；

5、控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度。

6、可选地，所述根据所述第一眼部图像，确定所述佩戴者的眼球转动方向之后，所述方法还包括：

7、根据所述眼球转动方向，确定所述眼球转动方向对应的摄像装置调节条件，所述摄像装置调节条件用于表征对应眼球转动方向下触发所述摄像装置的摄像方向调节的最小眼球转动角度；

8、根据所述第一眼部图像，确定所述佩戴者的眼球转动角度；

9、所述控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度，包括：

10、在所述眼球转动角度满足所述眼球转动方向对应的摄像装置调节条件的情况下，控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度。

11、可选地，所述在所述眼球转动角度满足所述眼球转动方向对应的摄像装置调节条件的情况下，控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度，包括：

12、在所述眼球转动角度在第一预设时长内均满足所述眼球转动方向对应的摄像装置调节条件的情况下，控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度。

13、可选地，所述方法在所述获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像之前，还包括：

14、指示所述佩戴者按照不同的指定方向转动眼球；

15、分别获取所述眼动追踪装置采集到的所述佩戴者按照不同的指定方向转动眼球后的第二眼部图像；

16、对于任一指定方向，根据所述指定方向对应的所述第二眼部图像，确定所述指定方向对应的摄像装置调节条件；

17、所述根据所述眼球转动方向，确定所述眼球转动方向对应的摄像装置调节条件，包括：

18、根据所述眼球转动方向，确定与所述眼球转动方向匹配的指定方向对应的摄像装置调节条件。

19、可选地，所述方法还包括：

20、在所述头戴设备满足预设触发条件的情况下，重复所述指示所述佩戴者按照不同的指定方向转动眼球的步骤。

21、可选地，所述预设触发条件包括：所述佩戴者更换和/或所述头戴设备的佩戴状态为未佩戴的持续时长大于第二预设时长。

22、可选地，所述方法在所述获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像之前，还包括：

23、获取所述头戴设备的佩戴状态，所述佩戴状态包括佩戴和未佩戴中的一个；

24、在所述佩戴状态为佩戴的情况下，启动所述眼动追踪装置。

25、可选地，所述获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像，包括：

26、获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第三眼部图像；

27、在所述第三眼部图像表征所述眼动追踪装置正确拍摄所述佩戴者的眼部图像的情况下，获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像。

28、可选地，所述预设角度的取值范围为大于等于5°，小于或等于15°。

29、根据本申请的第二方面，提供了一种基于眼动追踪的控制装置，应用于头戴设备，所述头戴设备包括眼动追踪装置及用于采集外界环境图像的摄像装置，所述摄像装置的摄像方向可调节，所述装置包括：

30、获取模块，用于获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像；

31、确定模块，用于根据所述第一眼部图像，确定所述佩戴者的眼球转动方向；

32、控制模块，用于控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度。

33、根据本申请的第三方面，提供了一种头戴设备，所述头戴设备包括如第二方面所述的装置、眼动追踪装置及用于采集外界环境图像的摄像装置；

34、或者，所述头戴设备包括所述眼动追踪装置、所述摄像装置、存储器和处理器，所述眼动追踪装置用于采集所述头戴设备的佩戴者的眼部图像，所述存储器用于存储计算机指令，所述处理器用于从所述存储器中调用所述计算机指令，以执行如第一方面中任一项所述的方法。

35、根据本申请的第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序在被处理器执行时实现根据第一方面中任一项所述的方法。

36、本申请提供了一种基于眼动追踪的控制方法，应用于头戴设备，头戴设备包括眼动追踪装置及用于采集外界环境图像的摄像装置，摄像装置的摄像方向可调节，该方法包括：获取眼动追踪装置采集到的头戴设备的佩戴者的第一眼部图像；根据第一眼部图像，确定佩戴者的眼球转动方向；控制摄像装置的摄像方向沿眼球转动方向转动预设角度。该方法可实现佩戴者眼球转动到某一特定方向，摄像装置的摄像方向也转动到该特定方向，即达到佩戴者看到哪里拍到哪里的目的。在此基础上，当佩戴者希望拍摄某一特定方向的图像时，只需眼球转动到该特定方向即可，而无需头部转动到该特定方向，这大大提高了佩戴者的佩戴体验。

37、通过以下参照附图对本申请的示例性实施例的详细描述，本申请的其它特征及其优点将会变得清楚。

技术特征：

1.一种基于眼动追踪的控制方法，其特征在于，应用于头戴设备，所述头戴设备包括眼动追踪装置及用于采集外界环境图像的摄像装置，所述摄像装置的摄像方向可调节，所述方法包括：

2.根据权利要求1所述的方法，其特征在于，所述根据所述第一眼部图像，确定所述佩戴者的眼球转动方向之后，所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，所述在所述眼球转动角度满足所述眼球转动方向对应的摄像装置调节条件的情况下，控制所述摄像装置的摄像方向沿所述眼球转动方向转动预设角度，包括：

4.根据权利要求2所述的方法，其特征在于，所述方法在所述获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像之前，还包括：

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

6.根据权利要求5所述的方法，其特征在于，所述预设触发条件包括：所述佩戴者更换和/或所述头戴设备的佩戴状态为未佩戴的持续时长大于第二预设时长。

7.根据权利要求1所述的方法，其特征在于，所述方法在所述获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像之前，还包括：

8.根据权利要求7所述的方法，其特征在于，所述获取所述眼动追踪装置采集到的所述头戴设备的佩戴者的第一眼部图像，包括：

9.根据权利要求1所述的方法，其特征在于，所述预设角度的取值范围为大于等于5°，小于或等于15°。

10.一种基于眼动追踪的控制装置，其特征在于，应用于头戴设备，所述头戴设备包括眼动追踪装置及用于采集外界环境图像的摄像装置，所述摄像装置的摄像方向可调节，所述装置包括：

11.一种头戴设备，其特征在于，所述头戴设备包括如权利要求10所述的装置、眼动追踪装置及用于采集外界环境图像的摄像装置；

12.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-9中任一项所述的方法。

技术总结本申请公开了一种基于眼动追踪的控制方法、装置、设备及介质，涉及可穿戴技术领域。其中方法应用于头戴设备，头戴设备包括眼动追踪装置及用于采集外界环境图像的摄像装置，摄像装置的摄像方向可调节，该方法包括：获取眼动追踪装置采集到的头戴设备的佩戴者的第一眼部图像；根据第一眼部图像，确定佩戴者的眼球转动方向；控制摄像装置的摄像方向沿眼球转动方向转动预设角度。该方法可实现当佩戴者希望拍摄某一特定方向的图像时，只需眼球转动到该特定方向即可，而无需头部转动到该特定方向，这大大提高了佩戴者的佩戴体验。技术研发人员：韩方受保护的技术使用者：青岛歌尔视界科技有限公司技术研发日：技术公布日：2024/11/4