动作识别方法及装置、终端设备、运动监测系统与流程

1.本技术涉及电子技术领域，尤其涉及一种动作识别方法及装置、终端设备、运动监测系统。


背景技术：

2.在羽毛球、乒乓球、网球等球类运动的训练过程中，统计运动者在击球时的击球类型、击球力道、击球速度、击球次数等运动参数，能够反应运动者的综合体质，基于这些运动参数能够对运动者的综合运动能力进行评估并制定个性化的训练计划。因此需要准确地确定出运动者在击球时的击球动作类型。
3.目前，市场已出现多种智能穿戴设备，如能量手环、计步鞋等。然而目前市场上的智能穿戴设备只能获取运动者在球类运动过程中心率、移动步数、移动距离等基本参数，而无法有效地识别出运动者在击球时的击球动作，无法准确地统计出运动者在击球时的运动参数。因此，现有的动作识别方法无法满足全面分析运动者在球类运动中的综合运动能力的需求。


技术实现要素：

4.有鉴于此，本技术提供一种动作识别方法、终端设备及存储介质，能够有效地识别出运动者在球类运动中的击球动作，便于全面地分析运动者的综合运动能力。
5.为了实现上述目的，第一方面，本技术实施例提供一种动作识别方法，该方法可以包括：获取运动数据；所述运动数据包括第一运动数据、第二运动数据、第三运动数据；根据所述第一运动数据获取运动者在运动过程中的步态特征；根据所述第二运动数据获取运动者在运动过程中的挥拍姿态特征；根据所述第三运动数据获取运动者在运动过程中的图像动作特征；根据所述步态特征、所述挥拍姿态特征和所述图像动作特征识别出运动者在运动过程中的击球动作。
6.其中，所述第一运动数据由位于运动者第一预设部位的第一数据采集装置进行采集；所述第二运动数据由设置于球拍预设位置的第二数据采集装置进行采集；所述第三运动数据由设置于预设拍摄位置的第三数据采集装置进行采集。
7.上述第一运动数据为可以体现运动者的下肢动作的运动数据，上述运动者的第一预设部位可以是运动者的小腿或大腿位置，也可以是运动者的脚踝处，当然还可以是能够采集到运动者的下肢动作的运动数据的其他预设部位。
8.上述第二运动数据为可以体现运动者的上肢击球动作的运动数据。上述球拍的预设位置可以是球拍的拍柄，也可以是球拍的拍杆，还可以是球拍的拍头，在此不加以限制。
9.上述第三运动数据为可以体现运动者的图像动作特征的运动数据。例如可以是运动者的运动图像。上述预设拍摄位置是指能够拍摄到运动者的运动图像的位置，上述预设拍摄位置可以根据实际需要进行确定，在此不加以赘述。
10.上述运动者在运动过程中的步态特征包括但不限于下肢动作的分类和下肢动作
的动作参数。上述运动者在运动过程中的挥拍姿态特征包括但不限于手部动作的类别、手部动作的动作参数以及是否有效击球。上述图像动作特征包括但不限于图像中运动员的勾腿特征(勾腿和未勾腿)。
11.本技术实施例提供的动作识别方法，能够基于各个数据采集装置采集到的运动数据进行特征提取和动作识别，利用多个运动数据识别出用户的步态特征、挥拍姿态特征以及图像动作特征，并基于步态特征、挥拍姿态特征以及图像动作特征确定出运动者的击球动作类型，能够准确地对运动过程中运动者的击球动作进行识别，有利于对运动者的综合运动能力进行全面地分析，更便于针对运动者制定个性化的训练计划。
12.在第一方面的一种可能的实施方式中，所述第一运动数据包括足部加速度数据和足部角速度数据，所述根据所述第一运动数据获取运动者在运动过程中的步态特征，包括：根据所述足部加速度数据和所述足部角速度数据绘制足部加速度波形和足部角速度波形，并提取足部加速度波形特征，如波峰值，波谷值，波峰值位置、波谷值位置等；根据所述足部加速度波形特征确定每一步的离地点和触地点；根据每一步的离地点和触地点对所述足部加速度波形和所述足部角速度波形进行单步分割；根据分割后的足部加速度波形和分割后的足部角速度波形确定运动者每一步对应的下肢动作的分类和下肢动作的动作参数。
13.根据分割后的足部加速度波形特征和分割后的足部角速度波形特征确定运动者的下肢动作参数具体可以是：根据离地点和触地点的时刻，计算运动者的腾空时间，根据离地点和触地点的间隔时间内的加速度的变化的积分值，计算运动者的移动距离、移动速度和纵跳高度等。
14.上述实施方式中，根据足部加速度数据和足部角速度数据确定每一步对应的下肢动作的分类以及下肢动作的动作参数，能够为分析运动者的综合运动能力提供运动者在运动过程中的下肢的活动情况，有助于更加全面的分析运动者的综合运动能力。
15.在第一方面的一种可能的实施方式中，所述第二运动数据包括手部加速度数据、手部角速度数据以及声波数据，所述根据所述第二运动数据获取运动者在运动过程中的挥拍姿态特征，包括：根据所述手部加速度数据和所述手部角速度数据确定运动者在运动过程中的手部动作的分类和手部动作的动作参数；根据所述声波数据对运动者在运动过程中的每一个手部动作进行有效击球和空挥的识别；根据运动者在运动过程中的手部动作的分类和手部动作的动作参数以及每一个手部动作进行有效击球和空挥的识别确定所述运动者在运动过程中的挥拍姿态特征。
16.上述实施方式中，基于声波确定是否有效击球，并结合基于手部加速度数据和所述手部角速度数据确定的手部动作的分类，能够更加准确的统计出运动者的有效击球数，有助于对运动者制定相应的训练计划。
17.在第一方面的一种可能的实施方式中，所述第三运动数据包括运动者的运动图像，所述根据所述第三运动数据获取运动者在运动过程中的图像动作特征，包括：将运动者的运动图像输入到完成训练的卷积神经网络模型中进行处理，得到所述运动者的运动图像对应的图像动作特征。
18.上述实现方式中，通过卷积神经网络模型确定运动者的图像动作特征，能够有效提高动作分类的效率。
19.在第一方面的一种可能的实施方式中，所述动作识别方法还包括：当识别出击球
动作为有效勾腿杀球时，获取勾腿角度、腾空时间以及待修正的跳跃高度；基于所述腾空时间和所述勾腿角度对所述待修正的跳跃高度进行修正。通过对运动者的跳跃高度进行修正，能够更准确地统计运动者的运动参数。
20.在第一方面的一种可能的实施方式中，所述运动数据还包括第四运动数据，相应地，所述动作识别方法还包括：根据所述第四运动数据确定运动者在运动过程中的生理参数。
21.上述实现方式中，在基于第一运动数据、第二运动数据以及第三运动数据确定出运动者在运动过程中的击球动作以及各个击球动作对应的动作参数后，还能基于第四运动数据确定的心率进一步分析运动者的运动强度和体能，能够更加全面地对运动者的综合运动能力进行评估。
22.第二方面，本技术实施例提供一种动作识别装置，包括：
23.第一获取单元，用于获取运动数据；所述运动数据包括第一运动数据、第二运动数据、第三运动数据，其中，所述第一运动数据由位于运动者第一预设部位的第一数据采集装置进行采集；所述第二运动数据由设置于球拍预设位置的第二数据采集装置进行采集；所述第三运动数据由设置于预设拍摄位置的第三数据采集装置进行采集
24.第二获取单元，用于根据所述第一运动数据获取运动者在运动过程中的步态特征；根据所述第二运动数据获取运动者在运动过程中的挥拍姿态特征；根据所述第三运动数据获取运动者在运动过程中的图像动作特征；
25.识别单元，用于根据所述步态特征、所述挥拍姿态特征和所述图像动作特征识别出运动者在运动过程中的击球动作。
26.在第二方面的一种可能的实施方式中，动作识别装置还包括第三获取单元，上述第三获取单元用于根据运动数据获取击球动作的动作参数。
27.在第二方面的一种可能的实施方式中，第一获取单元还用于获取第四运动数据。相应地，所述动作识别装置还包括生理参数确定单元，所述生理参数确定单元用于根据所述第四运动数据确定运动者在运动过程中的生理参数
28.在第二方面的一种可能的实施方式中，上述动作识别装置还包括修正单元，上述修正单元用于当击球动作为有效勾腿杀球时，根据腾空时间和勾腿角度对运动者的跳跃高度进行修正。
29.第三方面，本技术实施例提供了一种运动监测系统，所述运动监测系统包括第一数据采集装置、第二数据采集装置、第三采集装置以及如第二方面所述的动作识别装置；
30.所述第一数据采集装置、所述第二数据采集装置、所述第三数据采集装置分别与所述动作识别装置通信连接；
31.所述第一数据采集装置用于采集第一运动数据；
32.所述第二数据采集装置用于采集第二运动数据；
33.所述第三数据采集装置用于采集第三运动数据；
34.所述动作识别装置用于根据所述第一运动数据、所述第二运动数据以及所述第三运动数据识别运动者在运动过程中的击球动作。
35.在第三方面的一种可能的实施方式中，所述运动监测系统还包括第四数据采集装置；所述第四数据采集装置与所述动作识别装置通信连接；
36.所述第四数据采集装置用于采集第四运动数据；
37.所述动作识别装置还用于根据所述第四运动数据确定运动者在运动过程中的生理参数。
38.第四方面，本技术实施例提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上述第一方面所述的动作识别方法。
39.第五方面，本技术实施例提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上述第一方面所述的动作识别方法。
40.第六方面，本技术实施例提供了一种计算机程序产品，当计算机程序产品在终端设备上运行时，使得终端设备执行上述第一方面中任一项所述的动作识别方法。
41.第七方面，提供一种芯片，该芯片包括处理器，当该处理器执行指令时，处理器用于执行上述第二方面中任一种设计所涉及的动作识别方法。该指令可以来自芯片内部的存储器，也可以来自芯片外部的存储器。可选的，该芯片还包括输入输出电路。
42.可以理解的是，上述第二方面至第五方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。
附图说明
43.图1为本技术实施例提供的一种动作识别方法所适用的运动监测系统的架构示意图；
44.图2为图1对应的运动监测系统的使用场景示意图；
45.图3为图1对应的运动监测系统的工作过程的示意框图；
46.图4为下肢动作分别为走和跳时对应的足部加速度波形和足部角速度波形的对比图；
47.图5为本技术实施例提供的另一种运动监测系统的架构示意图；
48.图6为图5对应的运动监测系统的使用场景示意图；
49.图7为图5对应的运动监测系统的工作过程的示意框图；
50.图8为本技术实施例提供的一种动作方法的实现流程示意图；
51.图9为本技术实施例提供的一种动作识别装置的结构示意图；
52.图10为本技术实施例提供的一种终端设备的结构示意图。
具体实施方式
53.以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本技术实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本技术。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本技术的描述。
54.应当理解，当在本技术说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
55.还应当理解，在本技术说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
56.如在本技术说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
[0057]
另外，在本技术说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
[0058]
在本技术说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本技术的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
[0059]
羽毛球、乒乓球、网球等球类运动是深受人们喜爱的运动。本技术实施例提供的动作识别方法和运动监测系统主要用于对羽毛球、乒乓球、网球等球类运动的击球动作进行识别，下面以羽毛球运动为例，对本技术实施例提供的动作识别方法和运动监测系统进行说明，详述如下：
[0060]
羽毛球作为一项竞技运动，其动作多样化，主要通过高远球、杀球、挑球、搓球等手部动作来完成动作。为了对羽毛球运动者的综合运动能力进行评估并制定个性化的训练计划，需要对羽毛球运动者在羽毛球运动过程中的击球类型、击球力道、击球速度、击球次数等运动参数进行统计。而目前的智能穿戴设备只能获取运动者在球类运动过程中心率、移动步数、移动距离等基本参数，基于这些基本参数无法分析出运动者在运动过程中的综合运动能力。
[0061]
目前市场上也出现了一些羽毛球动作检测装置，例如设置在羽毛球拍底部的羽毛球动作检测配件，羽毛球动作检测配件能够进行羽毛球击球动作和识别等。然而由于羽毛球动作检测配件设置在球拍上，因此只能进行上肢击球动作的检测，不能实现对用户的下肢动作的检测，也无法对用户的生命体征参数进行检测。因此，目前的羽毛球的击球动作识别方法存在无法结合用户下肢动作和生命体征参数对运动者的综合运动能力进行全面科学的分析和指导的问题。
[0062]
为了解决上述目前的羽毛球的击球动作识别方法存在无法结合用户下肢动作和生命体征参数对运动者的综合运动能力进行全面科学的分析和指导的问题，本技术实施例提供了一种动作识别方法和运动监测系统。
[0063]
请参阅图1，图1示出了本技术实施例提供的动作识别方法所适用的运动监测系统的架构示意图。如图1所示，运动监测系统100可以包括第一数据采集装置1001、第二数据采集装置1002、第三数据采集装置1003和动作识别装置1004。上述第一数据采集装置1001、第二数据采集装置1002、第三数据采集装置1003分别与动作识别装置1004通信连接。动作识别装置1004能够基于各个数据采集装置采集到的运动数据进行特征提取和动作识别，通过利用多个运动数据识别出用户的步态特征、挥拍姿态特征以及图像动作特征，并基于步态
特征、挥拍姿态特征以及图像动作特征确定出运动者的击球动作类型，能够准确地对运动过程中运动者的击球动作进行识别，有利于对运动者的综合运动能力进行全面地分析，更便于针对运动者制定个性化的训练计划。
[0064]
上述动作识别装置1004可以通过近距离通信连接方式分别与第一数据采集装置1001、第二数据采集装置1002、第三数据采集装置1003建立无线通信连接，或者，动作识别装置1004可以通过有线通信方式分别与第一数据采集装置1001、第二数据采集装置1002、第三数据采集装置1003建立有线通信连接。本技术实施例不对动作识别装置1004与第一数据采集装置1001之间、动作识别装置1004与第二数据采集装置1002之间、动作识别装置1004与第三数据采集装置1003之间的具体通信方式做任何限定。
[0065]
其中，近距离通信连接方式可以是蓝牙连接、近场通信(near field communication，nfc)连接、无线保真(wireless-fidelity，wifi)连接或紫蜂(zigbee)连接等，为了提高运动者使用的便利性，本实施例中可优选采用蓝牙连接；近距离通信标识为终端设备近距离通信连接相关的唯一性标识，若采用蓝牙连接，则近距离通信标识对应可以为蓝牙媒体访问控制(media access control，mac)地址或蓝牙设备的其他唯一性标识。
[0066]
在本技术实施例中，上述第一数据采集装置1001用于采集第一运动数据。具体的，上述第一数据采集装置1001可以设置于运动者的第一预设部位上。上述第一运动数据为可以体现运动者的下肢动作的运动数据。第一数据采集装置1001还用于将实时采集到的第一运动数据发送给与其通信连接的动作识别装置1004。
[0067]
在本技术实施例中，上述运动者的第一预设部位可以是运动者的小腿或大腿位置，也可以是运动者的脚踝处，当然还可以是能够采集到运动者的下肢动作的运动数据的其他预设部位。为了便于理解，下面以上述第一预设部位为运动者的脚踝为例进行说明。需要说明的是，上述第一数据采集装置1001可以只在运动者的一个脚上，也可以在两个脚上都设置第一数据采集装置，在此不加以限制。
[0068]
在本技术实施例中，上述第一运动数据可以包括运动者在运动过程中的足部加速度数据和足部角速度数据。具体的，上述第一数据采集装置1001可以是具备有加速度计和陀螺仪的电子设备。上述电子设备可以采集到运动者在运动过程中足部加速度数据和足部角速度数据。
[0069]
请参阅图2，在具体应用中，上述第一数据采集装置1001可以是包括六轴惯性传感器的可穿戴设备。运动者在进行羽毛球训练时，可以将上述包括六轴惯性传感器的可穿戴设备穿戴在脚踝处。在运动者的训练过程中，上述六轴惯性传感器就能够实时采集上述运动者在运动过程中的足部加速度数据和足部角速度数据。
[0070]
当然，上述第一数据采集装置1001也可以是智能鞋。智能鞋中内置有六轴惯性传感器，运动者穿上该智能鞋后，就能够通过智能鞋中的六轴惯性传感器来实时采集上述运动者在运动过程中的足部加速度数据和足部角速度数据。
[0071]
在具体应用中，上述第二数据采集装置1002用于采集第二运动数据。具体的，上述第二数据采集装置可以设置于球拍的预设位置。上述第二运动数据为可以体现运动者的上肢击球动作的运动数据。上述第二数据采集装置1002还用于将实时采集到的第二运动数据发送给与其通信连接的动作识别装置1004。
[0072]
在本技术实施例中，上述球拍的预设位置可以是球拍的拍柄，也可以是球拍的拍
杆，还可以是球拍的拍头，在此不加以限制。在本技术实施例中，以上述球拍的预设位置为球拍的拍柄为例进行说明。
[0073]
请参阅图2，上述第二数据采集装置1002可以内嵌在球拍的拍柄中，具体的，可以是将第二数据采集装置1002内嵌在球拍的拍柄的后盖上。通过内嵌在球拍的拍柄中的第二数据采集装置1002采集能够体现上肢击球动作的第二运动数据。
[0074]
在本技术实施例中，上述第二运动数据可以包括运动者在运动过程中的手部加速度数据、手部角速度数据和声波数据。具体的，上述第二数据采集装置1002可以包括加速度传感器、陀螺仪和麦克风。上述加速度传感器用于实时采集运动者在运动过程中的手部加速度数据，上述陀螺仪用于实时采集运动者在运动过程中的手部角速度数据，上述麦克风用于实时采集运动者在运动过程中的声波数据。具体的，上述第二数据采集装置1002也可以包括六轴惯性传感器和麦克风。上述六轴惯性传感器用于实时采集运动者在运动过程中的手部加速度数据和手部角速度数据，上述麦克风用于实时采集运动者在运动过程中的声波数据。
[0075]
在本技术实施例中，上述第三数据采集装置1003用于采集第三运动数据。上述第三数据采集装置1003可以设置于预设拍摄位置。上述第三运动数据为可以体现运动者的图像动作特征的运动数据。上述第三数据采集装置1003还用于将其实时采集到的第三运动数据发送给与其通信连接的动作识别装置1004。
[0076]
在本技术实施例中，上述第三运动数据可以是运动者的运动图像。上述预设拍摄位置是指能够拍摄到运动者的运动图像的位置，上述预设拍摄位置可以根据实际需要进行确定，在此不加以赘述。
[0077]
请参阅图2，在本技术实施例中，为了全方位的捕捉运动者的运动图像，上述预设拍摄位置可以是球场的四个角落。即通过设置在球场的四个角落的第三数据采集装置采集运动者在运动过程中的运动图像。
[0078]
在本技术实施例中，上述第三数据采集装置1003可以是能够采集到运动者的运动图像的终端设备，例如具备摄像功能的手机、摄像头等。以上述第三数据采集装置1003为手机为例，上述第三运动数据就是手机拍摄到的图像数据或视频数据。
[0079]
在本技术实施例中，动作识别装置1004可以是具备数据处理能力的终端设备，动作识别装置能够对第一数据采集装置1001采集到的第一运动数据进行处理，进而得到运动者在运动过程中的步态特征；也能够对第二数据采集装置1002采集到的第二运动数据进行处理，进而得到运动者在运动过程中的挥拍姿态特征；还能够对第三数据采集装置1003采集到的第三运动数据进行处理，进而得到运动者在运动过程中的图像动作特征。上述动作识别装置1004还能够基于上述步态特征、上述挥拍姿态特征以及上述图像动作特征识别出运动者在运动过程中的击球动作。
[0080]
在本技术实施例中，上述动作识别装置1004可以是独立的终端设备，例如可以是可穿戴设备，也可以是手机、平板电脑、增强现实(augmented reality，ar)/虚拟现实(virtual reality，vr)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，umpc)、上网本、个人数字助理(personal digital assistant，pda)等移动终端，还可以是具备数据处理能力的服务器设备，本技术实施例不对动作识别装置1004的具体类型作任何限制。此外，上述动作识别装置1004还可以是不具备硬件结构的虚拟计算机和云
服务器等具备数据处理能力的虚拟终端。
[0081]
在本技术实施例中，上述动作识别装置1004还可以与第一数据采集装置1001设置在同一个电子设备中，即该电子设备可以包括第一数据采集装置1001和动作识别装置1004。可以理解的是，上述动作识别装置1004也可以与第二数据采集装置1002设置在同一个电子设备中，即该电子设备可以包括第二数据采集装置1002和动作识别装置1004。同样地，上述动作识别装置1004也可以与第三数据采集装置1003设置在同一个电子设备中，即该电子设备可以包括第三数据采集装置1003和动作识别装置1004。
[0082]
请参阅图3，在本技术实施例中，第一数据采集装置10001将其实时采集到的第一运动数据发送给动作识别装置1004。动作识别装置1004在获取到第一运动数据后，可以对第一运动数据进行单步分割，进而确定出运动者在运动过程中的步态特征。上述运动者在运动过程中的步态特征包括但不限于下肢动作的分类和下肢动作的动作参数。
[0083]
在具体应用中，上述第一运动数据包括足部加速度数据和足部角速度数据，上述对第一运动数据处理的过程具体为：根据第一运动数据绘制足部加速度波形和足部角速度波形，然后根据足部加速度波形和足部角速度波形确定每一步的离地点和触地点，根据每一步的离地点和触地点对足部加速度波形和足部角速度波形进行单步分割，并根据分割后的足部加速度波形和足部角速度波形确定出运动者在运动过程中的单步步态特征。
[0084]
足部加速度波形中两个相邻波峰可以表示一个动作周期(即一步)，两个相邻波峰的第一个波峰所对应的时间点就是离地点，第二个波峰所对应的时间点就是触地点，离地点与触地点之前的时间段就是一个动作周期。根据足部加速度波形就能够确定出每一步的离地点和触地点，进而确定出每一个动作周期，在基于动作周期将足部加速度的波形图和足部角速度的波形图进行单步分割。
[0085]
每个动作周期对应的下肢动作可以是走、跑以及跳跃等。不同的下肢动作所对应的足部加速度波形和足部角速度波形是不同的，因此，根据足部加速度波形和足部角速度波形就能够确定出每个动作周期所对应的下肢动作。示例性的，请参阅图4，当下肢动作为走时，足部加速度波形和足部角速度波形如图4中的(a)所示；当下肢动作为跳跃时，足部加速度波形和足部角速度波形如图4中的(b)所示。需要说明的是，图4中的横坐标轴表示的是第一运动数据的采集时间，单位是微秒(μs)；纵坐标轴表示的加速度的值以及角速度的值，当纵坐标轴表示加速度的值时，单位是米每平方秒(m/s2)，当纵坐标表示角速度的值时，单位是弧度每秒(rad/s)。
[0086]
当确定了每个动作周期对应的下肢动作后，还能够基于每个动作周期内的加速度、角速度、离地点以及触地点确定出每个动作周期对应的下肢动作的动作参数，例如腾空时间、跳跃高度、移动距离、移动速度等。
[0087]
请继续参考图3，在本技术实施例中，上述第二数据采集装置1002能够将其实时采集到的第二运动数据发送给与其通信连接的动作识别装置1004。动作识别装置1004在获取到第二运动数据后，可以对第二运动数据进行处理，进而确定出运动者在运动过程中的挥拍姿态特征。上述运动者在运动过程中的挥拍姿态特征包括但不限于手部动作的类别、手部动作的动作参数以及是否有效击球。
[0088]
在具体应用中，上述第二运动数据可以包括手部加速度数据、手部角速度数据以及声波数据，上述对第二数据进行处理的过程具体为：根据手部加速度数据和手部角速度
数据绘制手部加速度波形和手部角速度波形，然后基于手部加速度波形和手部角速度波形确定出每一次挥拍时的手部动作的分类和动作参数。基于声波数据提取出声波数据的特征值，然后基于声波数据的特征值进行有效击球和空挥的识别。最后根据基于手部加速度波形和手部角速度波形确定出每一次挥拍时的手部动作的分类和动作参数和基于声波数据的特征值进行击球和空挥的分类确定出运动者每次挥拍时的挥拍姿态特征。
[0089]
上述挥拍时的手部动作的分类包括但不限于高远球、杀球、搓球等，上述挥拍的动作参数包括击球速度、击球力度、击球轨迹等。
[0090]
基于手部加速度波形和手部角速度波形确定出每一次挥拍时的手部动作的分类和挥拍时的动作参数可以是基于现有的分类算法模型来实现，即将手部加速度波形和手部角速度波形输入到现有的分类算法模型中进行处理，就能够得到每一次挥拍时的手部动作的分类和挥拍时的动作参数，在此不再加以赘述。
[0091]
上述声波数据的特征值包括但不限于能量、峰值以及频率。由于声波数据的时域波形只体现声压随时间变化的关系,而不能体现声波数据的特征值。因此，需要将声波数据的时域波形转换为能够体现特征值的频域波形，然后在提取对相应的特征值。目前有许多声波特征值的提取方法，如基于梅尔频率倒谱系数(mel-frequency cepstral coefficients，mfccs)提取特征值的方法、基于线性预测倒谱系数(linear prediction cepstrum coefficient，lpcc)提取特征值的方法等。基于声波数据的特征值进行有效击球和空挥的识别过程具体为：将提取到的能量、峰值以及频率通过预设高斯混合模型进行相似度匹配计算，当计算得到的相似度大于预设阈值时，确定当前手部动作为有效击球，否则确定当前手部动作是空挥(即无效击球)。
[0092]
上述预设高斯混合模型是基于每个运动者的历史运动数据确定出的高斯混合模型，每个运动者都有其对应的预设高斯混合模型，可以通过运动者id将运动者与预设高斯混合模型进行关联。动作识别装置1004能够根据当前正在进行训练的运动者的运动者id确定出对应的预设高斯混合模型。而预设高斯混合模型就是确定了高斯混合模型参数的最优解的高斯混合模型，上述高斯混合模型参数可表示为λ。λ的最优解的求解过程即为高斯混合模型的训练过程。
[0093]
在具体应用中，为了确定高斯混合模型参数λ的最优解，可以用n个m维的高斯密度函数线性加权函数来表示上述高斯混合模型，其中，n和m均是大于1的正整数。
[0094]
其中，上述高斯混合模型的函数可以表示为：
[0095][0096]
其中，x是声波数据的m维特征参数，x＝(x1,x2,...,xm)，ωi是指第i个高斯密度函数的权重，且gi(x)为特征参数x的高斯概率密度函数。
[0097][0098]
其中，ci是指第i个高斯密度函数的协方差矩阵，μi是指第i个高斯密度函数的均值向量。
[0099]
具体的，λ＝(ωi,μi,ci)可以基于期望最大化算法的迭代计算对λ的最优解进行估计。
[0100]
在确定出运动者挥拍时是有效击球还是空挥后，结合每一次挥拍时的手部动作的分类，就能够确定出挥拍姿态特征。示例性的，假设基于手部加速度数据、手部角速度数据确定出运动者在运动过程中的手部动作的分类为：第一个手部动作是高远球、第二个手部动作是杀球、第三个手部动作是搓球；基于声波数据确定出第一手部动作是空挥、第二个手部动作是有效击球、第三个手部动作是有效击球；则可以确定运动者在运动过程中的挥拍姿势特征为：第一个手部动作为无效高远球以及击球时的击球速度、击球力度、击球轨迹等；第二个手部动作为有效杀球以及击球时的击球速度、击球力度、击球轨迹等；第三个手部动作为有效搓球以及击球时的击球速度、击球力度、击球轨迹等。
[0101]
请继续参考图3，在本技术实施例中，上述第三数据采集装置1003能够将其实时采集到的第三运动数据发送给与其通信连接的动作识别装置1004。动作识别装置1004在获取到第三运动数据后，能够基于第三运动数据和卷积神经网络模型分析出运动者在运动过程中的图像动作特征。
[0102]
在本技术实施例中，上述第三运动数据为运动者的运动图像。上述动作识别装置1004在对第三运动数据进行处理时，可以先进行目标检测，在运动图像中框选出包含运动者的目标图像区域，然后基于该目标图像区域中的图像来识别图像中运动员的勾腿特征。这样能够有效地减少动作识别装置1004利用卷积神经网络模型对运动图像进行处理时的运算量，减少计算资源的占用，提高处理效率。
[0103]
上述图像动作特征包括但不限于图像中运动员的勾腿特征(勾腿和未勾腿)。
[0104]
上述卷积神经网络模型是指已经训练好的能够用于对第三运动数据进行处理以确定出图像动作特征的卷积神经网络模型。用于图像处理的卷积神经网络模型可以采用现有的卷积神经网络模型，对卷积神经网络模型进行训练的过程可以使用大量的已知分类的运动图像对卷积神经网络模型进行训练，使得训练好的卷积神经网络模型能够在输入第三运动数据时，输入第三运动数据对应的图像动作特征。关于构建和训练卷积神经网络模型的过程可以参见现有的构建和训练的方法，本技术实施例在此不再加以赘述。
[0105]
训练好的卷积神经网络模型可以存储在动作识别装置1004的数据存储区，动作识别装置1004在接收到第三数据采集装置1003采集的第三运动数据后，会自动调用该卷积神经网络模型对第三运动数据进行处理，以得到第三运动数据对应的图像动作特征。
[0106]
可以理解的是，上述图像动作特征还可以包括击球动作分类，即上述卷积神经网络模型还能够基于输入的运动图像确定出运动者的击球动作的分类。然后结合第一运动数据确定的步态特征和第二运动数据确定的挥拍姿态特征综合性地确定出运动者的击球动作以及击球动作参数。
[0107]
请继续参考图3，在本技术实施例中，上述动作识别装置1004在得到步态特征、挥拍姿势特征以及图像动作特征后，能够融合这几个特征(即步态特征、挥拍姿势特征以及图像动作特征)最终确定出运动过程中运动者的击球动作。同时也能够确定出运动过程中运动者在击球时的击球速度、击球力度、腾空时间、跳跃高度、移动距离、移动速度等动作参数。
[0108]
在本技术实施例中，上述运动者的击球动作可以包括有效高远球、有效勾腿跳杀、有效未勾腿跳杀、有效原地杀球、有效搓球等、无效高远球、无效跳杀、无效原地杀球、无效搓球等。
[0109]
融合步态特征、挥拍姿势特征以及图像动作特征最终确定出运动过程中运动者的击球动作可以是通过将步态特征、挥拍姿势特征和图像动作特征先进行结合，以此来确定在击球时运动者的击球动作；然后在运动者在跳跃时存在勾腿的情况时确定勾腿角度，再基于腾空时间和勾腿角度对运动者的跳跃高度进行修正，最终识别出运动者在运动过程中存在的击球动作以及各个击球动作对应的动作参数。
[0110]
示例的，假设根据第一数据采集装置1001采集到的第一运动数据确定出的运动者在运动过程中的下肢动作分别为走、跳跃、跳跃；根据第二数据采集装置1002采集到的第二运动数据确定的手部动作的类别分别为有效搓球、无效杀球、有效杀球；根据第三数据采集装置1003采集到的第三运动数据确定的勾腿特征分别为未勾腿、未勾腿、勾腿；通过将上述特征进行融合可以确定出运动者在运动过程中的击球动作分别为有效搓球、无效跳杀、有效勾腿跳杀。
[0111]
在本技术实施例中，只有当检测到跳跃动作时，获取跳跃动作对应的动作图像，然后基于该动作图像识别出运动者是否勾腿，若存在勾腿的情况，则结合勾腿角度和腾空时间对跳跃高度进行修正；若运动者在跳跃动作下未勾腿，则无需进行修正。需要说明的是，对于跳跃高度的修正，可以基于已有的修正模型来实现，在此不再加以赘述。
[0112]
综上可知，这样就能够全面准确地分析出运动者在运动过程中的击球动作，并确定出各个击球动作对应的动作参数，有利于对运动者的综合运动能力进行全面地分析，更便于针对运动者制定个性化的训练计划。
[0113]
请参阅图5，图5是本技术实施例提供的另一种运动监测系统的结构框图。如图5所示，区别于本技术上一实施例，该运动监测系统还包括第四数据采集装置1005。上述第四数据采集装置1005也与所述动作识别装置1004通信连接。
[0114]
上述动作识别装置1004可以通过近距离通信连接方式与第四数据采集装置1005建立无线通信连接，或者，动作识别装置1004可以通过有线通信方式与第四数据采集装置1005建立有线通信连接。本技术实施例不对动作识别装置1004与第四数据采集装置1005之间的具体通信方式做任何限定。
[0115]
其中，近距离通信连接方式可以是蓝牙连接、近场通信(near field communication，nfc)连接、无线保真(wireless-fidelity，wifi)连接或紫蜂(zigbee)连接等，为了提高运动者使用的便利性，本实施例中可优选采用蓝牙连接；近距离通信标识为终端设备近距离通信连接相关的唯一性标识，若采用蓝牙连接，则近距离通信标识对应可以为蓝牙媒体访问控制(media access control，mac)地址或蓝牙设备的其他唯一性标识。
[0116]
上述第四数据采集装置1005用于采集第四运动数据。上述第四数据采集装置可以设置于运动者的第二预设部位。上述第四运动数据为能够体现运动者在运动过程中生理参数的运动数据。所述生理参数包括但不限于心率、脉搏、体温等。在本技术实施例中，上述第四运动数据包括但不限运动者在运动过程中的心率数据。
[0117]
在本技术实施例中，上述运动者的第二预设部位是指能够采集到第四运动数据的部位，例如运动者的手腕。当然，上述运动者的第二预设部位还可以是其他能够采集到第四运动数据的部位，例如指尖、脖子等部位，在此不加以限制。
[0118]
请参阅图6，在具体应用中，上述第四数据采集装置1005可以是包括能够采集心率数据的可穿戴设备，例如智能手表、智能手环等。运动者在进行羽毛球训练时，可以将上述
可穿戴设备穿戴在手腕处。运动者在训练过程中，上述可穿戴设备就能够实时采集上述运动者在运动过程中的心率数据。
[0119]
在实际应用中，上述可穿戴设备可以包括用于采集心率数据的光电容积描记(photoplethysmograph，ppg)传感器，通过上述ppg传感器来采集运动者手腕处的心率数据。
[0120]
请一并参阅图7，在本技术实施例中，上述动作识别装置1004还能够对第四数据采集装置1005采集到的第四运动数据进行处理，进而确定出运动者在运动过程中的心率。
[0121]
上述第四运动数据可以是基于光电容积描记(photoplethysmograph，ppg)传感器采集到的ppg数据。具体地，动作识别装置1004能够对第四运动数据进行滤波处理进而确定出运动者在运动过程中的心率。
[0122]
需要说明的是，当上述第四运动数据为脉搏数据时，动作识别装置能够对脉搏数据进行脉冲波形峰值间隔特征提取处理，进而确定出运动者在运动过程中的心率值。
[0123]
在本技术实施例中，上述动作识别装置在基于第一运动数据、第二运动数据以及第三运动数据确定出运动者在运动过程中的击球动作以及各个击球动作对应的动作参数后，还能基于第四运动数据确定的心率进一步分析运动者的运动强度和体能。能够更加全面地对运动者的综合运动能力进行评估。
[0124]
为了更便于理解，下面对动作识别的过程进行详细说明。
[0125]
图8为本技术实施例提供的动作识别方法的流程示意图.上述动作识别方法的执行主体可以是上述实施例中的动作识别装置，如图8所示，该方法可以包括如下步骤：
[0126]
s11、获取运动数据。
[0127]
在此，为了识别出运动者在运动过程中的击球动作，就需要先获取该运动者运动时的运动数据。在本技术实施例中，上述运动数据包括第一运动数据、第二运动数据、第三运动数据。
[0128]
其中，第一运动数据为能够体现运动者在运动过程中的下肢动作的运动数据。上述第二运动数据为能够体现运动者在运动过程中的上肢击球动作的运动数据。上述第三运动数据为能够体现运动者的图像动作特征的运动数据。
[0129]
在本技术实施例中，上述第一运动数据可以包括：运动者在运动过程中的足部加速度数据和足部角速度数据。上述第二运动数据可以包括：运动者在运动过程中的手部加速度数据、手部角速度数据和声波数据。上述第三运动数据可以包括：运动者的运动图像。
[0130]
其中，第一运动数据由位于运动者第一预设部位的第一数据采集装置进行采集，第二运动数据由设置于球拍预设位置的第二数据采集装置进行采集，第三运动数据由设置于预设拍摄位置的第三数据采集装置进行采集。
[0131]
上述运动者的第一预设部位可以是运动者的小腿或大腿位置，也可以是运动者的脚踝处，当然还可以是能够采集到运动者的下肢动作的运动数据的其他预设部位。
[0132]
上述球拍的预设位置可以是球拍的拍柄，也可以是球拍的拍杆，还可以是球拍的拍头，在此不加以限制。
[0133]
上述预设拍摄位置是指能够拍摄到运动者的运动图像的位置，上述预设拍摄位置可以根据实际需要进行确定，在此不加以赘述。
[0134]
在本技术实施例中，各个数据采集装置可以将实时采集到的运动数据存储在其本
地存储器中。基于此，动作识别装置要获取运动数据时，各个数据采集装置就能够将其存储在本地存储器中的运动数据发送给与之通信连接的动作识别装置。
[0135]
s12、根据运动数据获取姿态特征。
[0136]
在本技术实施例中，上述根据运动数据获取姿态特征包括：根据第一运动数据获取运动者在运动过程中的步态特征；根据所述第二运动数据获取运动者在运动过程中的挥拍姿态特征；根据所述第三运动数据获取运动者在运动过程中的图像动作特征。
[0137]
在本技术实施例中，上述第一运动数据包括足部加速度数据和足部角速度数据，根据第一运动数据获取运动者在运动过程中的步态特征的过程具体为：根据第一运动数据绘制足部加速度波形和足部角速度波形，然后根据足部加速度波形和足部角速度波形确定每一步的离地点和触地点，根据每一步的离地点和触地点对足部加速度波形和足部角速度波形进行单步分割，并根据分割后的足部加速度波形和足部角速度波形确定出运动者在运动过程中的步态特征。
[0138]
上述运动者在运动过程中的步态特征包括但不限于下肢动作的分类和下肢动作的动作参数。下肢动作的分类可以是走、跑以及跳跃等。下肢动作的动作参数可以是腾空时间、跳跃高度、移动距离、移动速度等。
[0139]
在本技术实施例中，上述第二运动数据可以包括手部加速度数据、手部角速度数据以及声波数据，上述根据所述第二运动数据获取运动者在运动过程中的挥拍姿态特征的过程具体为：根据手部加速度数据和手部角速度数据绘制手部加速度波形和手部角速度波形，然后基于手部加速度波形和手部角速度波形确定出每一次挥拍时的手部动作的分类和动作参数；基于声波数据提取出声波数据的特征值，然后基于声波数据的特征值进行有效击球和空挥的识别；最后根据基于手部加速度波形和手部角速度波形确定出每一次挥拍时的手部动作的分类和动作参数和基于声波数据的特征值进行有效击球和空挥的分类确定出运动者每次挥拍时的挥拍姿态特征。
[0140]
上述运动者在运动过程中的挥拍姿态特征包括但不限于手部动作的类别、手部动作的动作参数以及是否有效击球。
[0141]
上述挥拍时的手部动作的分类包括但不限于高远球、杀球、搓球等，上述挥拍的动作参数包括击球速度、击球力度、击球轨迹等。
[0142]
在本技术实施例中，上述第三运动数据可以包括运动者的运动图像。根据所述第三运动数据获取运动者在运动过程中的图像动作特征的过程具体为：对运动图像先进行目标检测，从运动图像中框选出包含运动者的目标图像区域，然后将目标图像区域输入到训练完成的卷积神经网络模型中进行处理，确定出运动者在运动过程中的图像动作特征。
[0143]
上述图像动作特征包括但不限于图像中运动员的勾腿特征(勾腿和未勾腿)。
[0144]
可理解的是，上述第三运动数据还可以是包括球场热图等能够用于绘制球场上的运动轨迹分布(运动者的运动轨迹以及球的运动轨迹等)的图像，上述球场热图可以用来辅助分析运动的步态特征以及得失分位置等。
[0145]
s13、根据姿态特征识别击球动作。
[0146]
在本技术实施例中，在得到步态特征、挥拍姿势特征以及图像动作特征后，融合步态特征、挥拍姿势特征以及图像动作特征最终识别出运动过程中运动者的击球动作。
[0147]
融合步态特征、挥拍姿势特征以及图像动作特征最终确定出运动过程中运动者的
击球动作可以是通过将步态特征、挥拍姿势特征和图像动作特征先进行结合，以此来确定在击球时运动者的击球动作；然后在运动者在跳跃时存在勾腿的情况时确定勾腿角度，再基于腾空时间和勾腿角度对运动者的跳跃高度进行修正，最终识别出运动者在运动过程中存在的击球动作以及各个击球动作对应的动作参数。
[0148]
示例的，确定出的运动者在运动过程中的步态特征分别为走、跳跃、跳跃；运动者在运动过程中的挥拍姿势特征为有效搓球、无效杀球、有效杀球；图像动作特征分别为未勾腿、未勾腿、勾腿；通过将上述特征进行融合可以确定出运动者在运动过程中的击球动作分别为有效搓球、无效跳杀、有效勾腿跳杀。
[0149]
在本技术另一实施例中，还可以根据运动数据获取击球动作的动作参数。
[0150]
在本技术实施例中，上述击球动作的动作参数可以包括击球速度、击球力度、腾空时间、跳跃高度、移动距离、移动速度等。上述动作参数的获取过程可以参见前述实施例，在此不加以赘述。通过确定出运动员在击球时的动作参数，能够更便于对运动者的综合运动能力进行更具体的分析。
[0151]
在本技术另一实施例中，当击球动作为有效勾腿杀球时，根据腾空时间和勾腿角度对运动者的跳跃高度进行修正。然后基于修正后的跳跃高度来分析运动者的综合运动能力。关于对跳跃高度的修正过程可以参见前述实施例，在此不加以赘述。通过对运动者的跳跃高度进行修正，能够更准确地统计运动者的运动参数。
[0152]
在本技术另一实施例中，上述运动数据还可以包括第四运动数据。根据所述第四运动数据能够确定运动者在运动过程中的生理参数。
[0153]
在具体应用中，上述第四运动数据由设置于运动者的第二预设部位的第四数据采集装置进行采集。上述第四运动数据为能够体现运动者在运动过程中生理参数的运动数据。所述生理参数包括但不限于心率、脉搏、体温等。
[0154]
在本技术实施例中，上述第四运动数据包括但不限运动者在运动过程中的心率数据。
[0155]
在本技术实施例中，上述运动者的第二预设部位是指能够采集到第四运动数据的部位，例如运动者的手腕。当然，上述运动者的第二预设部位还可以是其他能够采集到第四运动数据的部位，例如指尖、脖子等部位，在此不加以限制。
[0156]
具体的，通过对心率数据进行滤波处理，进而确定出运动者在运动过程中的心率。上述对心率数据进行滤波处理确定心率的过程可以参见现有的对心率数据的处理方法，在此不再加以赘述。
[0157]
本实施例提供的动作识别方法，能够基于各个数据采集装置采集到的运动数据进行特征提取和动作识别，通过利用多个运动数据识别出用户的步态特征、挥拍姿态特征以及图像动作特征，并基于步态特征、挥拍姿态特征以及图像动作特征确定出运动者的击球动作类型，能够准确地对运动过程中运动者的击球动作进行识别，有利于对运动者的综合运动能力进行全面地分析，更便于针对运动者制定个性化的训练计划。
[0158]
对应于上述实施例所述的动作识别方法，图9示出了本技术实施例提供的一种动作识别装置的结构框图，该动作识别装置包括的各单元用于执行上述实施例中的各步骤，具体请参阅上述实施例中的相关描述，为了便于说明，仅示出了与本技术实施例相关的部分。请参阅图9，该动作识别装置90包括第一获取单元91、第二获取单元92以及识别单元93。
其中：
[0159]
第一获取单元91用于获取运动数据。
[0160]
上述运动数据包括第一运动数据、第二运动数据、第三运动数据。
[0161]
第二获取单元92用于根据运动数据获取姿态特征。
[0162]
第二获取单元92具体用于根据第一运动数据获取运动者在运动过程中的步态特征；根据所述第二运动数据获取运动者在运动过程中的挥拍姿态特征；根据所述第三运动数据获取运动者在运动过程中的图像动作特征。
[0163]
识别单元93用于根据姿态特征识别击球动作。
[0164]
识别单元93具体用于根据步态特征、挥拍姿势特征以及图像动作特征识别出运动者在运动过程中的击球动作。
[0165]
在本技术一实施例中，上述动作识别装置还包括第三获取单元，上述第三获取单元用于根据运动数据获取击球动作的动作参数。
[0166]
在本技术实施例中，上述第一获取单元还用于获取第四运动数据。相应地，所述动作识别装置还包括生理参数确定单元，所述生理参数确定单元用于根据所述第四运动数据确定运动者在运动过程中的生理参数。
[0167]
在本技术一实施例中，上述动作识别装置还包括修正单元，上述修正单元用于当击球动作为有效勾腿杀球时，根据腾空时间和勾腿角度对运动者的跳跃高度进行修正。
[0168]
以上可以看出，本技术实施例提供的一种动作识别装置，同样能够基于各个数据采集装置采集到的运动数据进行特征提取和动作识别，通过利用多个运动数据识别出用户的步态特征、挥拍姿态特征以及图像动作特征，并基于步态特征、挥拍姿态特征以及图像动作特征确定出运动者的击球动作类型，能够准确地对运动过程中运动者的击球动作进行识别，有利于对运动者的综合运动能力进行全面地分析，更便于针对运动者制定个性化的训练计划。
[0169]
请参阅图10，图10是本技术另一实施例提供的终端设备的结构示意图。如图10所示，该实施例的终端设备10包括：至少一个处理器101(图10中仅示出一个)、存储器102以及存储在所述存储器102中并可在所述至少一个处理器101上运行的计算机程序103，所述处理器101执行所述计算机程序103时实现上述任意各个动作识别方法实施例中的步骤。
[0170]
所述终端设备10可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该终端设备可包括，但不仅限于，处理器101、存储器102。本领域技术人员可以理解，图10仅仅是终端设备10的举例，并不构成对终端设备10的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如还可以包括输入输出设备、网络接入设备等。
[0171]
所称处理器101可以是中央处理单元(central processing unit，cpu)，该处理器101还可以是其他通用处理器、数字信号处理器(digital signal processor，dsp)、专用集成电路(application specific integrated circuit，asic)、现成可编程门阵列(field-programmable gate array，fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
[0172]
所述存储器102在一些实施例中可以是所述终端设备10的内部存储单元，例如终
端设备10的硬盘或内存。所述存储器102在另一些实施例中也可以是所述终端设备10的外部存储设备，例如所述终端设备10上配备的插接式硬盘，智能存储卡(smart media card,smc)，安全数字(secure digital,sd)卡，闪存卡(flash card)等。进一步地，所述存储器102还可以既包括所述终端设备100的内部存储单元也包括外部存储设备。所述存储器102用于存储操作系统、应用程序、引导装载程序(boot loader)、数据以及其他程序等，例如所述计算机程序的程序代码等。所述存储器102还可以用于暂时地存储已经输出或者将要输出的数据。在本技术实施例中，上述存储器102还可以存储基于本技术实施例提供的动作识别方法确定的动作识别算法库。
[0173]
需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本技术方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。
[0174]
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本技术的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
[0175]
本技术实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时可实现上述动作识别方法中的步骤。
[0176]
本技术实施例提供了一种计算机程序产品，当计算机程序产品在移动终端上运行时，使得移动终端执行时可实现上述动作识别方法中的步骤。
[0177]
另外，本技术的实施例还提供一种装置，这个装置具体可以是芯片，组件或模块，该装置可包括相连的处理器和存储器；其中，存储器用于存储计算机执行指令，当装置运行时，处理器可执行存储器存储的计算机执行指令，以使芯片执行上述各方法实施例中的交互方法。
[0178]
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括：能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(rom，read-only memory)、随机存取存储器(ram，random access memory)、电载波信号、电信信号以及软件分发介质。例如u盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。
[0179]
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记
载的部分，可以参见其它实施例的相关描述。
[0180]
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本技术的范围。
[0181]
在本技术所提供的实施例中，应该理解到，所揭露的装置/网络设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/网络设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
[0182]
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分别到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
[0183]
以上所述实施例仅用以说明本技术的技术方案，而非对其限制；尽管参照前述实施例对本技术进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本技术各实施例技术方案的精神和范围，均应包含在本技术的保护范围之内。