数据迁移方法和装置与流程

本公开涉及数据处理，尤其涉及一种数据迁移方法和装置。

背景技术：

1、随着系统上线时间的增加，系统中会堆积越来越多的数据，可能会给系统运行带来性能问题，因此，需要将系统中的一些历史数据进行迁移。

2、目前，通常采用编写脚本定期手工调度的方式进行数据迁移，由于上述采用手工调度方式比较繁琐，所以通常两次数据迁移之间的间隔时长较长，然而，两次数据迁移之间的间隔时长越长，涉及迁移的数据量也越大，导致每次数据迁移时间较长，并且采用手工调度方式数据迁移效率较低，可能会影响系统数据的正常使用。

技术实现思路

1、本公开提供一种数据迁移方法和装置，以至少在一定程度上解决相关技术中的技术问题之一。本公开的技术方案如下：

2、根据本公开实施例的第一方面，提供一种数据迁移方法，包括：响应于目标数据库处于初始化状态，判断运行目标方案的目标实例是否完成初始化；其中，所述目标方案用于将所述目标数据库中的待迁移数据进行数据迁移；响应于所述目标实例未完成初始化，读取所述目标方案的方案配置信息；根据所述方案配置信息，生成所述目标方案的待处理任务队列，以完成所述目标实例的初始化；其中，所述任务队列中包括多个待处理定时任务；采用所述目标实例，对所述多个待处理定时任务进行处理，以实现所述待迁移数据的数据迁移。

3、根据本公开实施例的第二方面，提供了一种数据迁移装置，包括：判断模块，用于响应于目标数据库处于初始化状态，判断运行目标方案的目标实例是否完成初始化；其中，所述目标方案用于将所述目标数据库中的待迁移数据进行数据迁移；读取模块，用于响应于所述目标实例未完成初始化，读取所述目标方案的方案配置信息；生成模块，用于根据所述方案配置信息，生成所述目标方案的待处理任务队列，以完成所述目标实例的初始化；其中，所述任务队列中包括多个待处理定时任务；处理模块，用于采用所述目标实例，对所述多个待处理定时任务进行处理，以实现所述待迁移数据的数据迁移。

4、根据本公开实施例的第三方面，提供一种电子设备，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如本公开第一方面实施例所述的数据迁移方法。

5、根据本公开实施例的第四方面，提供一种计算机可读存储介质，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如本公开第一方面实施例所述的数据迁移方法。

6、根据本公开实施例的第五方面，提供一种计算机程序产品，包括：计算机程序，所述计算机程序被处理器执行时实现如本公开第一方面实施例所述的数据迁移方法。

7、本公开的实施例提供的技术方案至少带来以下有益效果：

8、在本技术方案中，通过响应于目标数据库处于初始化状态，判断运行目标方案的目标实例是否完成初始化；其中，目标方案用于将所述目标数据库中的待迁移数据进行数据迁移；响应于目标实例未完成初始化，读取目标方案的方案配置信息；根据方案配置信息，生成目标方案的待处理任务队列，以完成目标实例的初始化；其中，任务队列中包括多个待处理定时任务；采用目标实例，对多个待处理定时任务进行处理，以实现待迁移数据的数据迁移；由此，通过检查目标实例的初始化状态，并在目标实例未完成初始化的情况下，根据目标方案的方案配置信息，生成目标方案的待处理任务队列，实现了在数据迁移之前，使目标实例处于正确和准备就绪的状态，并且将数据迁移过程分解为多个待处理定时任务，待处理定时任务将按照在待处理任务队列中的顺序逐步处理，从而即使两次数据迁移之间的间隔时间较长，也不会导致迁移时涉及的数据量过大的问题，同时实现了自动、有序地完成待迁移数据的数据迁移，不仅提高了数据迁移的效率和准确性，还减少了人为干预和错误的可能性；其中，在执行目标方案的各流程节点之前，判断是否接收到用户的方案控制指令，提高了数据迁移的可控性，并在未接收到方案控制指令时，从多个待处理定时任务中准确地获取当前流程节点所对应的待处理定时任务，实现了数据迁移的针对性和准确性，避免了不必要的资源浪费；接着，判断当前流程节点是否为批次提交事务的流程节点，有助于根据不同类型的流程节点采取相应的处理策略，提高了数据迁移效率，进而，在当前流程节点为批次提交事务的流程节点时，采用目标实例进行至少一个批次处理，实现了数据迁移的批量性和高效性，使得大量数据能够得到快速而准确的处理，同时提高了数据迁移的可靠性和效率，以及增强了整个迁移过程的可控性和灵活性。

9、应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

技术特征：

1.一种数据迁移方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述采用所述目标实例，对所述多个待处理定时任务进行处理，包括：

3.根据权利要求2所述的方法，其特征在于，所述至少一个批次处理中其中一个批次处理，包括：

4.根据权利要求2所述的方法，其特征在于，所述方法还包括：

5.根据权利要求2所述的方法，其特征在于，所述采用所述目标实例，对所述多个待处理定时任务进行处理，还包括：

6.根据权利要求1所述的方法，其特征在于，所述根据所述方案配置信息，生成所述目标方案的待处理任务队列，包括：

7.根据权利要求6所述的方法，其特征在于，所述目标方案包括m个流程节点，

8.根据权利要求6所述的方法，其特征在于，所述方法还包括：

9.根据权利要求6所述的方法，其特征在于，所述根据所述多个待处理定时任务的任务执行时间，将所述待处理定时任务写入所述待处理任务队列之后，还包括：

10.一种数据迁移装置，其特征在于，包括：

技术总结本公开提出一种数据迁移方法和装置，方法包括：响应于目标数据库处于初始化状态，判断运行目标方案的目标实例是否完成初始化；响应于目标实例未完成初始化，读取目标方案的方案配置信息；根据方案配置信息，生成目标方案的待处理任务队列，以完成目标实例的初始化；采用目标实例，对多个待处理定时任务进行处理，以实现待迁移数据的数据迁移，由此，将数据迁移过程分解为多个待处理定时任务，待处理定时任务会按照在待处理任务队列中的顺序逐步处理，不会导致迁移时涉及的数据量过大的问题，同时实现了自动、有序地完成待迁移数据的数据迁移，不仅提高了数据迁移的效率和准确性，还减少了人为干预和错误的可能性。技术研发人员：阳毅受保护的技术使用者：中电金信技术有限公司技术研发日：技术公布日：2024/12/12