一种基于大数据适应性融合的保险数据传输方法与流程

本发明涉及一种基于大数据适应性融合的保险数据传输方法，属于数据处理。

背景技术：

1、伴随大数据技术的发展，保险行业积累了海量的数据，包括客户信息、交易记录、理赔数据等。基于大数据的适应性融合技术能够整合这些分散的数据资源，提供更全面的数据视角，从而实现精准和个性化的客户服务。

2、尽管大数据技术为保险行业带来了巨大的潜力，但在实际应用中，基于大数据适应性融合的保险数据传输仍面临存储资源浪费的问题。因为保险数据具有多样性和复杂性，目前主要依赖于分布式存储技术存储不同来源和类型的保险数据，分布式存储技术虽然可以解决存储海量保险数据的目的，但并没有优化保险数据，从而造成大量重复保险数据的冗余存储，造成存储资源浪费的现象发生。

3、即目前依然缺乏一种可有效避免在存储保险数据时造成存储资源浪费的方法。

技术实现思路

1、本发明提供一种基于大数据适应性融合的保险数据传输方法、装置及计算机可读存储介质，其主要目的在于解决在存储保险数据时造成存储资源浪费的问题。

2、为实现上述目的，本发明提供的一种基于大数据适应性融合的保险数据传输方法，包括：

3、接收原始保险数据的传输指令，利用所述传输指令连接保险数据管理系统，其中，保险数据管理系统包括保险任务确认单元、保险数据融合单元及保险数据存储单元；

4、根据所述传输指令接收原始保险数据，利用保险任务确认单元分析出原始保险数据的数据属性，并基于数据属性结构化原始保险数据，得到结构保险数据；

5、锁定出所述原始保险数据所在的保险任务链，其中，保险任务链由多个任务节点组成，且任务节点分为任务起点、任务中间点和任务终点，且任务中间点的数量为[0,n]，n为大于0的正整数；

6、基于保险任务链生成结构保险数据的结构任务数据，其中，结构任务数据内包括结构保险数据，且结构保险数据被标记为任务起点；

7、利用保险数据管理系统触发原始保险数据所在的保险任务链，直至分别生成与任务中间点和任务终点对应的任务中间数据和任务终点数据；

8、基于保险数据融合单元优化任务中间数据和任务终点数据，得到优化中间数据和优化终点数据；

9、将优化中间数据和优化终点数据填入至结构任务数据，得到完整任务数据，并将完整任务数据存储至保险数据存储单元，完成大数据适应性融合的保险数据传输。

10、可选地，所述根据所述传输指令接收原始保险数据，利用保险任务确认单元分析出原始保险数据的数据属性，包括：

11、解析传输指令得到原始保险数据的发起端的ip地址，将发起端的ip地址发送至保险数据管理系统后，利用保险数据管理系统连接发起端；

12、当保险数据管理系统连接发起端成功后，通知发起端传送原始保险数据至保险数据管理系统；

13、当保险数据管理系统接收完原始保险数据后，启动保险任务确认单元分析出原始保险数据的数据属性，其中，数据属性包括参保人员数据类型、参保保单数据类型、风险评估数据类型、理赔记录数据类型。

14、可选地，所述基于数据属性结构化原始保险数据，得到结构保险数据，包括：

15、按照数据类型对所述原始保险数据执行拆分，得到拆分保单数据，且拆分保单数据由参保人员数据、参保保单数据、风险评估数据和理赔记录数据其中的一种或全部组成；

16、生成结构空数据，其中，结构空数据的行维度与拆分保单数据的数据类型的数量相同；将拆分保单数据依次填入至结构空数据，得到结构保险数据，且结构保险数据的形式为：

17、

18、其中，mi表示第i个发起端发起的原始保险数据对应的结构保险数据，mj表示结构保险数据所包括的第j个拆分保单数据，且j≤4，m1表示参保人员数据，m2表示参保保单数据，m3表示风险评估数据，m4表示理赔记录数据。

19、可选地，所述基于保险任务链生成结构保险数据的结构任务数据，包括：

20、基于原始保险数据所在的保险任务链，构建出任务链空矩阵，其中，任务链空矩阵的表现形式为：

21、

22、其中，表示原始保险数据的任务链空矩阵，s表示保险任务链的标识集，由任务起点、任务中间点和任务终点组成，e表示任务节点之间的数据依赖关系，m表示用于存储结构保险数据的结构数据向量；

23、将结构保险数据存储至任务链空矩阵的结构数据向量内，生成结构任务数据g。

24、可选地，所述结构任务数据g的保险任务链的标识集s、数据依赖关系e和结构数据向量m的表现形式为：

25、s＝{s1,s2,…,si,…,sh}

26、e＝{e12,e13,…,eij,…,ehh-1}

27、m＝[mi]

28、其中，si表示任务节点，当i＝1时，s1表示任务起点，i＝h时，sh表示任务终点，i≠1且i≠h时，si表示任务中间点，eij表示第i个任务节点与第j个任务节点的数据依赖关系，mi表示第i个发起端发起的原始保险数据对应的结构保险数据，且mi与s1具有对应关系，当结构保险数据存储至结构数据向量时，利用任务起点s1标记结构保险数据mi。

29、可选地，所述eij表示的节点之间的数据依赖关系分为三种类型，分别为：任务起点与任务中间点、任务起点与任务终点、任务中间点与任务终点的数据依赖关系，且当eij＝1时，表示第i个任务节点与第j个任务节点具有数据依赖关系，当eij＝0时，表示第i个任务节点与第j个任务节点不具有数据依赖关系。

30、可选地，所述利用保险数据管理系统触发原始保险数据所在的保险任务链，直至分别生成与任务中间点和任务终点对应的任务中间数据和任务终点数据，包括：

31、利用保险数据管理系统生成所述原始保险数据可正常运行的通知指令；

32、按照原始保险数据所在的保险任务链，按顺序依次运行每个任务节点，并生成与任务节点具有对应关系的节点任务数据；

33、利用保险任务确认单元分析出每个任务节点对应的节点任务数据的数据属性；

34、基于节点任务数据的数据属性，结构化节点任务数据，得到结构节点数据，其中，结构节点数据包括任务中间数据和任务终点数据，且任务中间数据与任务中间点对应，任务终点数据与任务终点对应。

35、可选地，所述基于保险数据融合单元优化任务中间数据和任务终点数据，得到优化中间数据和优化终点数据，包括：

36、按照如下逻辑依次优化第i个任务节点与第j个任务节点的结构节点数据，其中，第i个任务节点与第j个任务节点包括任务中间点与任务终点：

37、利用保险数据融合单元获取第i个任务节点与第j个任务节点的数据依赖关系eij；

38、若数据依赖关系eij＝0时，放弃对第i个任务节点与第j个任务节点的结构节点数据的优化；

39、若数据依赖关系eij＝1时，在保险数据存储单元中开辟出数据依赖存储空间，并遍历出第i个任务节点的结构节点数据，与第j个任务节点的结构节点数据互相重复的重复数据，得到重复节点数据，其中，结构节点数据包括任务中间数据和任务终点数据；

40、将重复节点数据存储至数据依赖存储空间内，生成数据依赖ip；

41、利用数据依赖ip替换第i个任务节点的结构节点数据、第j个任务节点的结构节点数据的重复节点数据，直至替换完成得到优化中间数据和优化终点数据。

42、可选地，所述将优化中间数据和优化终点数据填入至结构任务数据，得到完整任务数据，包括：

43、将优化中间数据和优化终点数据填入至结构任务数据中的结构数据向量m内，填入后的结构数据向量m的表现形式为：

44、m＝[mi,mj,…,ml]

45、其中，mj表示与第2个任务节点对应的第j个发起端所生成的优化中间数据，ml表示与任务终点对应的第l个发起端所生成的优化终点数据，且mi,mj,…,ml的数量与保险任务链的标识集s所包括的任务节点的数量相同，均为h个；

46、当完成优化中间数据和优化终点数据填入至结构任务数据中的结构数据向量m后，得到完整任务数据。

47、为实现上述目的，本发明还提供一种基于大数据适应性融合的保险数据传输系统，包括：

48、保险数据结构模块，用于接收原始保险数据的传输指令，利用所述传输指令连接保险数据管理系统，其中，保险数据管理系统包括保险任务确认单元、保险数据融合单元及保险数据存储单元，根据所述传输指令接收原始保险数据，利用保险任务确认单元分析出原始保险数据的数据属性，并基于数据属性结构化原始保险数据，得到结构保险数据；

49、保险任务链确认模块，用于锁定出所述原始保险数据所在的保险任务链，其中，保险任务链由多个任务节点组成，且任务节点分为任务起点、任务中间点和任务终点，且任务中间点的数量为[0,n]，n为大于0的正整数：

50、数据优化模块，用于基于保险任务链生成结构保险数据的结构任务数据，其中，结构任务数据内包括结构保险数据，且结构保险数据被标记为任务起点，利用保险数据管理系统触发原始保险数据所在的保险任务链，直至分别生成与任务中间点和任务终点对应的任务中间数据和任务终点数据，基于保险数据融合单元优化任务中间数据和任务终点数据，得到优化中间数据和优化终点数据；

51、结构任务数据存储模块，用于将优化中间数据和优化终点数据填入至结构任务数据，得到完整任务数据，并将完整任务数据存储至保险数据存储单元，完成大数据适应性融合的保险数据传输。

52、为了解决上述问题，本发明还提供一种电子设备，所述电子设备包括：

53、至少一个处理器；以及，

54、与所述至少一个处理器通信连接的存储器；其中，

55、所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以实现上述所述的基于大数据适应性融合的保险数据传输方法。

56、为了解决上述问题，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一个指令，所述至少一个指令被电子设备中的处理器执行以实现上述所述的基于大数据适应性融合的保险数据传输方法。

57、相比于背景技术所述问题，本发明先接收原始保险数据的传输指令，利用所述传输指令连接保险数据管理系统，其中，保险数据管理系统包括保险任务确认单元、保险数据融合单元及保险数据存储单元，根据所述传输指令接收原始保险数据，利用保险任务确认单元分析出原始保险数据的数据属性，并基于数据属性结构化原始保险数据，得到结构保险数据，本发明利用保险任务确认单元分析原始保险数据的数据属性，并结构化这类数据，从而去除无效或冗余的信息，只保留对保险业务有实际价值的数据，减少存储空间的不必要占用；其次，锁定出所述原始保险数据所在的保险任务链，其中，保险任务链由多个任务节点组成，且任务节点分为任务起点、任务中间点和任务终点，基于保险任务链生成结构保险数据的结构任务数据，其中，结构任务数据内包括结构保险数据，且结构保险数据被标记为任务起点，通过锁定原始保险数据所在的保险任务链，可以识别出数据在整个保险流程中的位置，从而为后续生成结构任务数据提供前置条件的同时，提高了生成结构任务数据的生成速度；然后，利用保险数据管理系统触发原始保险数据所在的保险任务链，直至分别生成与任务中间点和任务终点对应的任务中间数据和任务终点数据，基于保险数据融合单元优化任务中间数据和任务终点数据，得到优化中间数据和优化终点数据，将优化中间数据和优化终点数据填入至结构任务数据，得到完整任务数据，并将完整任务数据存储至保险数据存储单元，完成大数据适应性融合的保险数据传输，由于将与原始保险数据相关的所有保险任务链的数据均执行结构化，从而保证了整个保险数据的规整性，此外，基于保险任务链生成的结构任务数据，将结构化保险数据标记为任务起点，还可以确保只有与特定任务直接相关的数据才会被存储和进一步处理，因此数据的规则性得到进一步提高，而且，利用保险数据融合单元优化任务中间数据和任务终点数据，可以进一步提炼和精简数据，提高数据质量，减少存储冗余和低价值信息，从而方便后续的数据存储，避免了过多的存储资源浪费。因此，因此本发明提出的基于大数据适应性融合的保险数据传输方法及系统，其主要目的在于解决在存储保险数据时造成存储资源浪费的问题。