一种视线交互方法、系统、车机、电子设备和存储介质与流程

本发明涉及一种交互方法、系统、车机、电子设备和存储介质，尤其涉及一种视线交互方法、系统、车机、电子设备和存储介质。

背景技术：

1、车载屏幕的不断变大，屏幕上的信息越来越多，各种应用更是数不胜数，离司机距离也变大，司机想获得某些信息时有时需要注视后手动或者语音进行交互，比如可见即可说功能使用越来越多，某些控件只要说出屏幕的文字即可识别并执行相应命令，省去了记指令的麻烦，看到什么说什么，简单易用，但是可见即可说也要注视屏幕信息后方可语音交互，但是有些只有图标并没文字信息需要用户手动或者清晰该图标是什么功能进行语音交互，有些屏幕上信息并不能进行交互，是一些常规信息，用户如果需要获取信息需要手动放大获取相应的信息，增加了操作的繁琐性和复杂度，已经不能满足人们的要求，亟需得到改进。

技术实现思路

1、本发明的目的在于提供一种视线交互方法、系统、车机、电子设备和存储介质，首先要解决的技术问题是省略了语音交互的繁琐过程，其次要解决的技术问题是实现可见即可说的交互过程，根据背景技术的记载，解决现有技术存在的缺憾。

2、本发明提供了下述方案：

3、一种可见即可交互的视线交互方法，包括：

4、利用视线捕捉设备，检测交互对象在交互界面上的视线变化，获取交互对象在交互界面上的视线焦点，确定视线焦点所对应的视线区域；

5、案号：faw040327-c-xcn1240434 1

6、检测所述视线区域中是否存在能够与交互对象进行交互的可控控件，如果视线区域中存在可控控件，则通过改变视线区域的分辨率对视线区域进行突出显示；

7、检测视线在视线区域的停留时间，如果所述停留时间满足预设的时间，则执行视线区域内可控控件对应的指令。

8、进一步的，所述利用视线捕捉设备，检测交互对象在交互界面上的视线变化，进一步包括：

9、通过视线捕捉设备对交互对象的眼部进行实时监测，获取交互对象的视线方向信息，将视线方向信息与交互界面的坐标系进行映射，确定视线焦点；

10、当所述视线焦点在车机屏幕上移动时，记录视线移动轨迹，根据所述视线移动轨迹确定对应的视线区域。

11、进一步的，所述通过改变视线区域的分辨率对视线区域进行突出显示，进一步包括：使视线区域保持清晰，并使非视线区域降低分辨率，用于对视线区域进行突出显示。

12、进一步的，对于视线区域采用拉近和/或放大和/或变清晰和/或提高亮度的方式进行突出显示；

13、对于非视线区域，采用高斯模糊和/或缩小和/或降低亮度的方式进行模糊显示。

14、进一步的，所述检测视线在视线区域的停留时间，如果所述停留时间满足预设的时间，则执行视线区域内可控控件对应的指令，进一步包括：

15、如果所述停留时间满足预设的时间，则判定交互对象在进行注视操作，在执行视线区域内可控控件对应的指令的同时，对可控控件的名称和功能进行语音播报操作。

16、进一步的，所述检测视线在视线区域的停留时间，如果所述停留时间满足预设的时间，则执行视线区域内可控控件对应的指令，进一步包括：

17、如果视线区域内包括两个或两个以上的可控控件，则根据视线在不同可控控件上停留的时间判断交互对象关注的控件；

18、如果无法判断交互对象关注的控件，则通过依次对所有可控控件进行突出显示的操作，直到交互对象的视线离开视线区域后将视线区域恢复原状。

19、一种可见即可交互的视线交互系统，包括：

20、交互对象与交互界面控制模块，利用视线捕捉设备，检测交互对象在交互界面上的视线变化，获取交互对象在交互界面上的视线焦点，确定视线焦点所对应的视线区域；

21、可控控件突出显示模块，检测所述视线区域中是否存在能够与交互对象进行交互的可控控件，如果视线区域中存在可控控件，则通过改变视线区域的分辨率对视线区域进行突出显示；

22、可控控件对应指令执行模块，检测视线在视线区域的停留时间，如果所述停留时间满足预设的时间，则执行视线区域内可控控件对应的指令。

23、一种车机，所述车机中设置有所述的可见即可交互的视线交互系统，执行所述的可见即可交互的视线交互方法。

24、一种电子设备，包括：处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；所述存储器中存储有计算机程序，当所述计算机程序被所述处理器执行时，使得所述处理器执行所述方法的步骤。

25、一种计算机可读存储介质，其存储有可由电子设备执行的计算机程序，当所述计算机程序在所述电子设备上运行时，使得所述电子设备执行所述方法的步骤。

26、本发明与现有技术相比具有以下的优点：

27、本发明将视线交互技术应用在人机交互中，带来更加自然和直观的体验。通过追踪用户的视线变化，系统能够准确获取屏幕上用户关注点的位置信息，并根据这些信息进行相应区域的形态调整。当用户关注非可控控件时，系统会保持该区域清晰可见，同时降低周围区域的分辨率，以优化性能。例如，在车载导航系统中，当车主将目光投向时间显示时，系统会主动将时间放大并突出显示，利用ocr技术获取范围内文本信息，并通过tts技术进行语音播报。

28、而在导航过程中，当车主观看特定地方时(如路口或重要标志)，该区域也会被放大显示，并且相关信息会被自动播报出来。此外，在倒车影像功能中，如果车主集中注意力于某个特定点位，则该点位会被放大显示，并提供更详细的语音提示和警示。

29、对于一些可控制件而言，在用户注视后即可实现主动交互功能。这样就省去了先注视再进行语音交互或手动操作的步骤，使得交互过程更加自然便捷。

30、本发明提供的视线交互技术方案不仅提升了用户体验和操作效率，还增强了在驾驶等场景下的安全性和便利性智能设备与交互对象合作的效果更加自然，更加直接高效。

技术特征：

1.一种可见即可交互的视线交互方法，其特征在于，包括：

2.根据权利要求1所述的可见即可交互的视线交互方法，其特征在于，所述利用视线捕捉设备，检测交互对象在交互界面上的视线变化，进一步包括：

3.根据权利要求1所述的可见即可交互的视线交互方法，其特征在于，所述通过改变视线区域的分辨率对视线区域进行突出显示，进一步包括：使视线区域保持清晰，并使非视线区域降低分辨率，用于对视线区域进行突出显示。

4.根据权利要求3所述的可见即可交互的视线交互方法，其特征在于，对于视线区域采用拉近和/或放大和/或变清晰和/或提高亮度的方式进行突出显示；

5.根据权利要求1所述的可见即可交互的视线交互方法，其特征在于，所述检测视线在视线区域的停留时间，如果所述停留时间满足预设的时间，则执行视线区域内可控控件对应的指令，进一步包括：

6.根据权利要求1所述的可见即可交互的视线交互方法，其特征在于，所述检测视线在视线区域的停留时间，如果所述停留时间满足预设的时间，则执行视线区域内可控控件对应的指令，进一步包括：

7.一种可见即可交互的视线交互系统，其特征在于，包括：

8.一种车机，其特征在于，所述车机中设置有权利要求7所述的可见即可交互的视线交互系统，执行权利要求1至6中任一项所述的可见即可交互的视线交互方法。

9.一种电子设备，其特征在于，包括：处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；所述存储器中存储有计算机程序，当所述计算机程序被所述处理器执行时，使得所述处理器执行权利要求1至6中任一项所述方法的步骤。

10.一种计算机可读存储介质，其特征在于，其存储有可由电子设备执行的计算机程序，当所述计算机程序在所述电子设备上运行时，使得所述电子设备执行权利要求1至6中任一项所述方法的步骤。

技术总结本发明公开了一种视线交互方法、系统、车机、电子设备和存储介质，方法步骤包括：利用视线捕捉设备，检测交互对象在交互界面上的视线变化，获取交互对象在交互界面上的视线焦点，确定视线焦点所对应的视线区域；检测所述视线区域中是否存在能够与交互对象进行交互的可控控件，如果视线区域中存在可控控件，则通过改变视线区域的分辨率对视线区域进行突出显示；根据视线在视线区域的停留时间，执行或不执行视线区域内可控控件对应的指令。本发明提供的视线交互技术方案不仅提升了用户体验和操作效率，还增强了在驾驶等场景下的安全性和便利性智能设备与交互对象合作的效果更加自然，更加直接高效。技术研发人员：刘玲受保护的技术使用者：中国第一汽车股份有限公司技术研发日：技术公布日：2024/10/17