用于文件夹中数据的数据脱敏同步方法及系统与流程

本发明涉及网络数据配置领域，具体涉及一种用于文件夹中数据的数据脱敏同步方法及系统。

背景技术：

1、大数据时代，数据存在多种存储方式，在一些政府、机构或者企业中有很多重要数据会以文件夹的方式存储。为了让其他用户调用这些数据，需要将文件夹中的数据写入到一个可供调用的目标数据库中。为了在其他用户调用数据的同时避免敏感数据泄露(例如用户需要获取张三的身份地址信息，但是张三的身份证号为敏感数据，需要保密)，收到用户的数据调用请求后，会对调用的数据进行人工查找到敏感数据后，对敏感数据进行数据脱敏(对敏感数据进行变形，例如遮挡部分或者全部敏感数据)。

2、但是，人工查找敏感数据并进行数据脱敏的工作效率较低，而且对于不同的数据需要进行不同敏感数据识别和数据脱敏流程，操作过程比较复杂；与此同时，人工查找敏感数据的精度有待提高。

技术实现思路

1、针对现有技术中存在的缺陷，本发明解决的技术问题为：如何自动将文件夹中的敏感数据进行数据脱敏、并同步至目标数据库中，进而简化操作流程，提高工作效率和数据脱敏精度。

2、为达到以上目的，第一方面，本申请实施例提供一种用于文件夹中数据的数据脱敏同步方法，包括以下步骤：将文件夹的数据同步至目标数据库时，根据设置的敏感关键词获取文件夹中对应的敏感数据，根据设置的脱敏方式对敏感数据进行数据脱敏后同步至目标数据库。

3、结合第一方面，在一种实施方式中，所述脱敏关键词的设置流程包括：对不同的数据调用用户设置对应的敏感关键词，为每个敏感关键词设置对应的脱敏方式。

4、结合第一方面，在一种实施方式中，所述为每个敏感关键词设置对应的脱敏方式的流程包括：将所有敏感关键词分成禁止知晓类别和独占知晓类别，禁止知晓类别的脱敏方式为字符遮盖，独占知晓类别的加密方式为加密算法；将采用加密算法进行数据脱敏的敏感数据同步至目标数据库时，还会将该加密算法对应的解密密钥存储至目标数据库中的指定位置。

5、结合第一方面，在一种实施方式中，所述根据设置的脱敏方式对敏感数据进行数据脱敏后同步至目标数据库的流程包括：获取需要同步的文件夹数据，设置文件夹数据的敏感关键词和对应的脱敏方式；根据当前文件夹信息创建数据同步任务，根据敏感关键词和脱敏方式创建数据脱敏任务；在进行数据同步任务的过程中执行数据脱敏任务。

6、结合第一方面，在一种实施方式中，所述获取需要同步的文件夹数据的流程包括：当需要同步的文件夹数据为本地文件时，将本地文件上传至服务器；当需要同步的文件夹数据为服务器上已经存在的文件时，在服务器上选中对应的文件。

7、结合第一方面，在一种实施方式中，所述设置文件夹数据的敏感关键词和对应的脱敏方式的流程包括：对文件夹数据进行解析得到表头对象和业务数据清单，根据表头对象设置脱敏关键词和对应的脱敏方式。

8、结合第一方面，在一种实施方式中，所述数据同步任务的创建流程包括：确定目标数据库和目标数据表，根据当前文件夹地址配置目标数据库的导入路径；配置当前文件夹的表头对象与目标数据表的表头对象的映射关系。

9、结合第一方面，在一种实施方式中，所述数据脱敏任务的创建流程包括：将当前文件夹数据的敏感关键词和对应的脱敏方式保存至同步任务的任务执行文件中。

10、结合第一方面，在一种实施方式中，所述在进行数据同步任务的过程中执行数据脱敏任务的过程包括：根据目标数据库的导入路径导入解析后的文件夹数据；根据表头对象的映射关系，将文件夹中的非敏感数据同步至目标数据库；对文件夹中的敏感数据进行数据脱敏后，根据表头对象的映射关系同步至目标数据库。

11、第二方面，本申请实施例提供了一种用于文件夹中数据的数据脱敏同步系统，用于执行第一方面提供的方法。

12、与现有技术相比，本发明的优点在于：

13、与现有技术中的人工查找敏感数据并进行数据脱敏相比，本发明将文件夹的数据同步至目标数据库时，能够根据预先设置的关键词和脱敏方式，自动获取敏感数据并进行数据脱敏，不仅不需要人工干预，操作流程简单，工作效率较高，而且根据上述方式查找到的脱敏数据的精度较高。

技术特征：

1.一种用于文件夹中数据的数据脱敏同步方法，其特征在于，该方法包括以下步骤：将文件夹的数据同步至目标数据库时，根据设置的敏感关键词获取文件夹中对应的敏感数据，根据设置的脱敏方式对敏感数据进行数据脱敏后同步至目标数据库。

2.如权利要求1所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述脱敏关键词的设置流程包括：对不同的数据调用用户设置对应的敏感关键词，为每个敏感关键词设置对应的脱敏方式。

3.如权利要求2所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述为每个敏感关键词设置对应的脱敏方式的流程包括：将所有敏感关键词分成禁止知晓类别和独占知晓类别，禁止知晓类别的脱敏方式为字符遮盖，独占知晓类别的加密方式为加密算法；将采用加密算法进行数据脱敏的敏感数据同步至目标数据库时，还会将该加密算法对应的解密密钥存储至目标数据库中的指定位置。

4.如权利要求1至3任一项所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述根据设置的脱敏方式对敏感数据进行数据脱敏后同步至目标数据库的流程包括：获取需要同步的文件夹数据，设置文件夹数据的敏感关键词和对应的脱敏方式；根据当前文件夹信息创建数据同步任务，根据敏感关键词和脱敏方式创建数据脱敏任务；在进行数据同步任务的过程中执行数据脱敏任务。

5.如权利要求4所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述获取需要同步的文件夹数据的流程包括：当需要同步的文件夹数据为本地文件时，将本地文件上传至服务器；当需要同步的文件夹数据为服务器上已经存在的文件时，在服务器上选中对应的文件。

6.如权利要求5所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述设置文件夹数据的敏感关键词和对应的脱敏方式的流程包括：对文件夹数据进行解析得到表头对象和业务数据清单，根据表头对象设置脱敏关键词和对应的脱敏方式。

7.如权利要求6所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述数据同步任务的创建流程包括：确定目标数据库和目标数据表，根据当前文件夹地址配置目标数据库的导入路径；配置当前文件夹的表头对象与目标数据表的表头对象的映射关系。

8.如权利要求7所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述数据脱敏任务的创建流程包括：将当前文件夹数据的敏感关键词和对应的脱敏方式保存至同步任务的任务执行文件中。

9.如权利要求8所述的用于文件夹中数据的数据脱敏同步方法，其特征在于，所述在进行数据同步任务的过程中执行数据脱敏任务的过程包括：根据目标数据库的导入路径导入解析后的文件夹数据；根据表头对象的映射关系，将文件夹中的非敏感数据同步至目标数据库；对文件夹中的敏感数据进行数据脱敏后，根据表头对象的映射关系同步至目标数据库。

10.一种用于文件夹中数据的数据脱敏同步系统，其特征在于：该系统用于执行权利要求1至9任一项所述的方法。

技术总结本发明公开了一种用于文件夹中数据的数据脱敏同步方法及系统，涉及网络数据配置领域。该方法的流程包括：将文件夹的数据同步至目标数据库时，根据设置的敏感关键词获取文件夹中对应的敏感数据，根据设置的脱敏方式对敏感数据进行数据脱敏后同步至目标数据库。本发明将文件夹的数据同步至目标数据库时，能够根据预先设置的关键词和脱敏方式，自动获取敏感数据并进行数据脱敏，不仅不需要人工干预，操作流程简单，工作效率较高，而且根据上述方式查找到的脱敏数据的精度较高。技术研发人员：熊伟受保护的技术使用者：中电云计算技术有限公司技术研发日：技术公布日：2024/7/29