AR音乐游戏交互方法和系统与流程

本申请涉及ar游戏领域，特别是涉及ar音乐游戏交互方法和系统。

背景技术：

1、随着科技的发展，ar技术在游戏领域的应用越来越广泛，例如广泛应用于ar音乐互动游戏。

2、现有的ar或vr音乐游戏通过游戏手柄进行操控，或者通过ar头盔识别摄像头或ar头盔识别简单的手部动作。

3、现有的音乐游戏在游戏中识别用户动作的准确性较低，限制了游戏模式的丰富性和互动性程度，影响了用户的体验感。

技术实现思路

1、本申请实施例提供了一种ar音乐游戏交互方法和系统，以至少解决相关技术中用户体验感不佳的问题。

2、第一方面，本申请实施例提供了一种ar音乐游戏交互方法，所述方法通过音乐游戏设备实现，所述音乐游戏设备包括通讯连接的穿戴式运动采集组件和ar设备，所述穿戴式运动采集组件用于穿戴在用户的目标部位，包括多个位置采集器，不同的所述位置采集器用于采集所述目标部位不同区域的运动参数；

3、所述方法应用于ar设备，包括：

4、获取目标音频，根据目标音频的节奏信息生成交互音块，并显示所述交互音块，以指示用户根据所述交互音块完成目标动作；

5、通过运动采集组件获取所述目标部位不同区域的运动参数，并根据所述运动参数确定用户动作；

6、根据所述用户动作和所述目标动作的匹配度，实时输出相应的提示和反馈信息，以供用户根据所述反馈信息调整目标部位的动作。

7、在一实施例中，所述目标部位为用户手部，所述不同区域的运动参数包括手指运动参数和手掌运动参数；

8、所述根据所述运动参数确定用户动作，包括：

9、根据所述手指运动参数确定手指运动状态，根据所述手掌运动参数确定手掌运动状态；

10、根据所述手指运动状态和所述手掌运动状态确定所述用户动作。

11、在一实施例中，所述位置采集组件穿戴于用户手部，所述手指运动参数包括指尖运动参数、关节运动参数；所述根据所述运动参数确定用户动作，包括：

12、根据指尖位置坐标确定手指的运动方向，根据关节位置坐标确定关节的运动方向，根据手掌的位置坐标确定手掌的运动方向；

13、根据所述手指的位置坐标和运动方向、关节的位置坐标和运动方向以及手掌的位置坐标运动方向，判断手部整体的动作；

14、根据所述手部整体的动作确定用户动作。

15、在一实施例中，所述交互音块包括方向信息和动作类型信息，所述显示所述交互音块，以指示用户根据所述交互音块完成目标动作，包括：

16、显示所述方向信息，以指示用户根据所述方向信息确定所述目标动作的方向；

17、显示所述动作类型信息，以指示用户根据所述动作类型信息确定所述目标动作的种类。

18、在一实施例中，所述获取目标音频，根据目标音频的节奏信息生成交互音块，包括：

19、根据用户指令调整目标音频和关卡难度，所述关卡难度根据目标音频的节奏速度、所述交互音块的复杂程度以及所述目标动作设定。

20、在一实施例中，所述获取目标音频，根据目标音频的节奏信息生成交互音块，包括：

21、根据所有所述用户动作和所述目标动作的匹配度确定游戏得分和准确率；

22、根据所述游戏得分和准确率调整所述关卡难度或者输出相应的音频供用户选择。

23、在一实施例中，所述方法还包括：

24、根据所有所述用户运动和所述目标动作输出游戏数据统计结果和反馈报告。

25、在一实施例中，所述方法通过ar技术创建虚实结合的场景，所述场景变化包括：

26、根据所述目标音频的节奏信息，改变所述场景；和/或

27、根据用户指令调整所述场景。

28、在一实施例中，所述反馈信息以声音、光线或触觉的形式呈现。

29、第二方面，本申请实施例提供了一种ar音乐游戏交互系统，所述系统包括穿戴式运动采集组件和ar设备，所述穿戴式运动采集组件用于穿戴在用户的目标部位，包括多个位置采集器，不同的所述位置采集器用于采集所述目标部位不同区域的运动参数；所述系统包括：

30、音频模块：用于获取目标音频，根据目标音频的节奏信息生成交互音块，通过所述ar设备显示所述交互音块，以指示用户根据所述交互音块完成目标动作；

31、动作模块：用于通过运动采集组件获取所述目标部位不同区域的运动参数，并确定用户动作；

32、输出模块：用于根据所述用户动作和所述目标动作的匹配度，实时输出相应的提示和反馈信息，以供用户根据所述反馈信息调整目标部位的动作。

33、本申请实施例提供的ar音乐游戏交互方法和系统至少具有以下技术效果。

34、本申请通过ar设备和运动采集组件配合，实现ar音乐游戏的互动。通过ar设备显示交互音块，通过设置在用户目标部位的位置采集器，准确采集用户目标部位的位置信息，并基于位置信息判断用户的运动状态，根据运动状态和目标动作的匹配度，实时向用户输出反馈信息，以提示用户根据反馈信息调整动作。以此方式，准确获取用户目标部位的动作并实时向用户输出反馈信息，提高ar音乐游戏的互动性和趣味性，提高用户体验感。

35、本申请的一个或多个实施例的细节在以下附图和描述中提出，以使本申请的其他特征、目的和优点更加简明易懂。

技术特征：

1.一种ar音乐游戏交互方法，其特征在于，所述方法通过音乐游戏设备实现，所述音乐游戏设备包括通讯连接的穿戴式运动采集组件和ar设备，所述穿戴式运动采集组件用于穿戴在用户的目标部位，包括多个位置采集器，不同的所述位置采集器用于采集所述目标部位不同区域的运动参数；

2.根据权利要求1所述的ar音乐游戏交互方法，其特征在于，所述目标部位为用户手部，所述不同区域的运动参数包括手指运动参数和手掌运动参数；

3.根据权利要求2所述的ar音乐游戏交互方法，其特征在于，所述位置采集组件穿戴于用户手部，所述手指运动参数包括指尖运动参数、关节运动参数；所述根据所述运动参数确定用户动作，包括：

4.根据权利要求1所述的ar音乐游戏交互方法，其特征在于，所述交互音块包括方向信息和动作类型信息，所述显示所述交互音块，以指示用户根据所述交互音块完成目标动作，包括：

5.根据权利要求1所述的ar音乐游戏交互方法，其特征在于，所述获取目标音频，根据目标音频的节奏信息生成交互音块，包括：

6.根据权利要求5所述的ar音乐游戏交互方法，其特征在于，所述获取目标音频，根据目标音频的节奏信息生成交互音块，包括：

7.根据权利要求6所述的ar音乐游戏交互方法，其特征在于，所述方法还包括：

8.根据权利要求1所述的ar音乐游戏交互方法，其特征在于，所述方法通过ar技术创建虚实结合的场景，所述场景变化包括：

9.根据权利要求1所述的ar音乐游戏交互方法，其特征在于，所述反馈信息以声音、光线或触觉的形式呈现。

10.一种ar音乐游戏交互系统，其特征在于，所述系统包括穿戴式运动采集组件和ar设备，所述穿戴式运动采集组件用于穿戴在用户的目标部位，包括多个位置采集器，不同的所述位置采集器用于采集所述目标部位不同区域的运动参数；所述系统包括：

技术总结本申请涉及一种AR音乐游戏交互方法和系统，其中，该AR音乐游戏交互方法通过音乐游戏设备实现，音乐游戏设备包括通讯连接的穿戴式运动采集组件和AR设备，穿戴式运动采集组件用于穿戴在用户的目标部位，包括多个位置采集器，不同的所述位置采集器用于采集所述目标部位不同区域的运动参数；方法应用于AR设备，包括：获取目标音频，根据目标音频的节奏信息生成交互音块，并显示所述交互音块，以指示用户根据所述交互音块完成目标动作；通过运动采集组件获取所述目标部位不同区域的运动参数，并根据所述运动参数确定用户动作；根据所述用户动作和所述目标动作的匹配度，实时输出相应的提示和反馈信息，以供用户根据所述反馈信息调整目标部位的动作。技术研发人员：钟旭受保护的技术使用者：杭州易现先进科技有限公司技术研发日：技术公布日：2024/5/29