流式计算中的数据聚合方法、装置、设备及介质与流程

技术特征：
1.一种流式计算中的数据聚合方法，其特征在于，所述方法包括：聚合计算在第一滚动窗口内接收到的物联网数据，得到第一聚合数据，所述第一滚动窗口的起始时刻是第一时刻，所述第一滚动窗口的结束时刻是第二时刻；在所述第二时刻之后的第三时刻接收延迟物联网数据，所述延迟物联网数据的事件时间戳在所述第一滚动窗口内；在所述第三时刻位于以所述第二时刻为起点的延迟容忍窗内的情况下，将所述延迟物联网数据合并到所述第一聚合数据中，所述延迟容忍窗的时间长度是预设容忍时长。2.根据权利要求1所述的方法，其特征在于，所述在所述第三时刻位于以所述第二时刻为起点的延迟容忍窗内的情况下，将所述延迟物联网数据合并到所述第一聚合数据中，包括：在所述第三时刻位于以所述第二时刻为起点的所述延迟容忍窗内的情况下，对所述延迟物联网数据进行筛选，得到筛选后的延迟物联网数据；将所述筛选后的延迟物联网数据合并到所述第一聚合数据中。3.根据权利要求2所述的方法，其特征在于，所述对所述延迟物联网数据进行筛选，得到筛选后的延迟物联网数据，包括：将满足数据取值范围的所述延迟物联网数据确定为所述筛选后的延迟物联网数据。4.根据权利要求1至3任一所述的方法，其特征在于，所述聚合计算在第一滚动窗口内接收到的物联网数据，得到第一聚合数据，包括：响应于在所述第一滚动窗口内的第四时刻接收到所述物联网数据，将所述物联网数据合并到预聚合数据中，得到所述第一聚合数据，所述预聚合数据是聚合计算所述第一时刻至所述第四时刻内的所述物联网数据得到的；或，在所述第一滚动窗口内，每隔预设时长，聚合计算在所述第一滚动窗口内接收到的所述物联网数据，得到所述第一聚合数据。5.根据权利要求1至3任一所述的方法，其特征在于，聚合计算的方式包括如下的至少一种：矢量平均、求和、计数、求平均值、求最大值、求最小值、求标准差、求第一个值、求最后一个值。6.根据权利要求1至3任一所述的方法，其特征在于，所述将所述延迟物联网数据合并到所述第一聚合数据中，包括：在所述第一聚合数据是所述物联网数据的矢量平均的情况下，计算所述第一聚合数据和所述延迟物联网数据的矢量平均；或，在所述第一聚合数据是所述物联网数据的和值的情况下，计算所述第一聚合数据和所述延迟物联网数据的和；或，在所述第一聚合数据是所述物联网数据的时间戳序列的情况下，根据所述延迟物联网数据的事件时间戳，计算所述第一聚合数据和所述延迟物联网数据的计数；或，在所述第一聚合数据是所述物联网数据的时间戳序列的情况下，根据所述延迟物联网数据的事件时间戳，计算所述第一聚合数据和所述延迟物联网数据的第一个值或最后一个值；或，在所述第一聚合数据是所述物联网数据的最大值的情况下，获取所述延迟物联网
数据和所述第一聚合数据中的最大值；或，在所述第一聚合数据是所述物联网数据的最小值的情况下，获取所述延迟物联网数据和所述第一聚合数据中的最小值；或，在所述第一聚合数据是所述物联网数据的平均值的情况下，计算所述第一聚合数据和所述延迟物联网数据的平均值。7.根据权利要求1至3任一所述的方法，其特征在于，所述在所述第三时刻位于以所述第二时刻为起点的延迟容忍窗内的情况下，将所述延迟物联网数据合并到所述第一聚合数据中之后，还包括：确定第二滚动窗口对应的第二聚合数据，所述第一滚动窗口和所述第二滚动窗口具有相同的时间长度；聚合计算所述第一聚合数据和所述第二聚合数据，得到级联聚合数据。8.一种流式计算中的数据聚合装置，其特征在于，所述装置包括：计算模块，用于聚合计算在第一滚动窗口内接收到的物联网数据，得到第一聚合数据，所述第一滚动窗口的起始时刻是第一时刻，所述第一滚动窗口的结束时刻是第二时刻；接收模块，用于在所述第二时刻之后的第三时刻接收延迟物联网数据，所述延迟物联网数据的事件时间戳在所述第一滚动窗口内；所述计算模块，还用于在所述第三时刻位于以所述第二时刻为起点的延迟容忍窗内的情况下，将所述延迟物联网数据合并到所述第一聚合数据中，所述延迟容忍窗的时间长度是预设容忍时长。9.一种计算机设备，其特征在于，所述计算机设备包括：处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至7中任一项所述的流式计算中的数据聚合方法。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行以实现如权利要求1至7中任一项所述的流式计算中的数据聚合方法。

技术总结
本申请公开了一种流式计算中的数据聚合方法、装置、设备及介质，涉及物联网领域。该方法包括：聚合计算在第一滚动窗口内接收到的物联网数据，得到第一聚合数据，所述第一滚动窗口的起始时刻是第一时刻，所述第一滚动窗口的结束时刻是第二时刻；在所述第二时刻之后的第三时刻接收延迟物联网数据，所述延迟物联网数据的事件时间戳在所述第一滚动窗口内；在所述第三时刻位于以所述第二时刻为起点的延迟容忍窗内的情况下，将所述延迟物联网数据合并到所述第一聚合数据中，所述延迟容忍窗的时间长度是预设容忍时长。本申请可以将延迟物联网数据合并到第一聚合数据，使得第一聚合数据的计算结果更为准确。算结果更为准确。算结果更为准确。


技术研发人员：郑伊翎
受保护的技术使用者：上海远景科创智能科技有限公司
技术研发日：2022.01.17
技术公布日：2022/5/10