一种直播间的操控方法、装置、设备和存储介质与流程

本申请涉及互联网直播，具体而言，涉及一种直播间的操控方法、装置、设备和存储介质。

背景技术：

1、随着互联网直播技术的普及，各直播平台迅速涌现，成为人们交流、娱乐和学习的重要途径。

2、目前，在各直播平台的直播间中，直播间主播大多使用物理输入设备(如键盘、鼠标或触摸屏等)控制直播过程中的活动，例如切换场景、文档翻页及推送商品等。这种传统的依赖于物理设备的操作方式限制了直播间的活动空间和互动自由度，尤其是一些需要更多身体语言或空间移动的场景。

技术实现思路

1、根据本申请的一方面，提供一种直播间的操控方法，包括：获取用户在直播间的图像帧；通过图像帧获取用户的手势和体态；根据用户的手势和体态，确定用户在直播间中的操作指令。

2、根据一些实施例，通过图像帧获取用户的手势和体态，包括：根据图像帧，通过预设的识别模型获取用户的多个手势特征点和多个人体特征点；基于多个手势特征点获取用户的手势；以及基于多个人体特征点获取用户的体态，用户的体态包括用户的手臂姿态。

3、根据一些实施例，基于多个手势特征点获取用户的手势，包括：获取预设的识别模型对应的手势库；通过手势库对多个手势特征点进行识别，以获取用户的手势。

4、根据一些实施例，基于多个人体特征点获取用户的体态，包括：获取预设的识别模型对应的手臂姿态库；通过手臂姿态库对多个人体特征点进行识别，以获取用户的体态。

5、根据一些实施例，通过图像帧获取用户在图像帧中所处的水平位置。

6、根据一些实施例，通过图像帧获取用户在图像帧中所处的水平位置，包括：基于用户的图像帧，将多个人体特征点的坐标进行归一化处理；确定已进行归一化处理的多个人体特征点的坐标中的脚部特征点的坐标；根据脚部特征点的坐标确定用户在图像帧中所处的水平位置。

7、根据一些实施例，根据用户的手势和体态，确定用户在直播间中的操作指令，包括：获取与预设的识别模型对应的手势库和手臂姿态库绑定的直播间操作指令列表；基于用户在图像帧中所处的水平位置，根据用户的手势和体态，从直播间操作指令列表中确定操作指令。

8、根据一些实施例，基于用户在图像帧中所处的水平位置，根据用户的手势和体态，从直播间操作指令列表中确定语音识别指令；通过语音识别指令获取用户的语音；确定用户的语音对应的操作指令。

9、根据本申请的一方面，提供一种直播间的操控装置，包括：图像获取模块，用于获取用户在直播间的图像帧；识别模块，用于通过图像帧获取用户的手势和体态；指令确定模块，用于根据用户的手势和体态，确定用户在直播间中的操作指令。

10、根据一些实施例，识别模块还用于通过图像帧获取用户在图像帧中所处的水平位置。

11、根据本申请的一方面，提供一种电子设备，包括：一个或多个处理器；存储装置，用于存储一个或多个程序；当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如前述的方法。

12、根据本申请的一方面，提供一种计算机可读存储介质，其上存储有计算机程序，程序被处理器执行时实现如前述的方法。

13、根据本申请的实施例，可通过人体和手势的识别实现直播间的操作指令的转换，提升直播操控的便捷性，并可结合语音识别技术，通过操作指令简化直播操作流程，增强用户的直播体验和互动性，使得直播过程更加流畅自然。

14、应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本申请。

技术特征：

1.一种直播间的操控方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，通过所述图像帧获取所述用户的手势和体态，包括：

3.根据权利要求2所述的方法，其特征在于，基于所述多个手势特征点获取所述用户的手势，包括：

4.根据权利要求2所述的方法，其特征在于，基于所述多个人体特征点获取所述用户的体态，包括：

5.根据权利要求2所述的方法，其特征在于，所述方法还包括：

6.根据权利要求5所述的方法，其特征在于，通过所述图像帧获取所述用户在所述图像帧中所处的水平位置，包括：

7.根据权利要求5所述的方法，其特征在于，根据所述用户的手势和体态，确定所述用户在直播间中的操作指令，包括：

8.根据权利要求7所述的方法，其特征在于，所述方法还包括：

9.一种直播间的操控装置，其特征在于，包括：

10.根据权利要求9所述的装置，其特征在于，所述识别模块还用于通过所述图像帧获取所述用户在所述图像帧中所处的水平位置。

11.一种电子设备，其特征在于，包括：

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-8中任一所述的方法。

技术总结本申请提供一种直播间的操控方法、装置、设备和存储介质，涉及互联网直播技术领域。一种直播间的操控方法，包括：获取用户在直播间的图像帧；通过所述图像帧获取所述用户的手势和体态；根据所述用户的手势和体态，确定所述用户在直播间中的操作指令。根据本申请的实施例，可通过人体和手势的识别实现直播间的操作，提升直播操控的便捷性。技术研发人员：张恩龙受保护的技术使用者：北京微吼时代科技有限公司技术研发日：技术公布日：2024/7/25