一种基于数据相关性的数据质量稽核系统及方法与流程

技术特征：
1.一种基于数据相关性的数据质量稽核系统，用于对通信数据质量进行评估，其特征在于，包括：数据抽样模块；稽核规则模块；相关性分析模块；所述数据抽象模块用于对通信数据进行多维度抽样，获取抽样数据；所述稽核规则模块用于根据需求自定义稽核规则对所述抽样数据的指标进行稽核；所述相关性分析模块用于对所述抽样数据多个相关的指标进行相关性分析，判断相关性指数是否达到规定阈值。2.根据权利要求1所述的基于数据相关性的数据质量稽核系统，其特征在于，所述相关性分析模块包括：自定义单元；调校单元；所述自定义单元用于根据需求选择多个要进行相关性分析的指标；所述调校单元用于对多个要进行相关性分析的指标的参数进行配置。3.根据权利要求2所述的基于数据相关性的数据质量稽核系统，其特征在于，所述稽核系统还包括：注册模块；算法管理模块；所述注册模块用于将用户自定义的稽核规则注册到所述稽核系统中，用以进行再次数据质量稽核；所述算法管理模块用于将指标的相关性分析算法更新到算法库中。4.根据权利要求3所述的基于数据相关性的数据质量稽核系统，其特征在于，所述相关性分析模块还包括：关联单元；所述关联单元用于获取指标数据之间的关联指数。5.根据权利要求4所述的基于数据相关性的数据质量稽核系统，其特征在于，所述稽核系统还包括：评估模块；所述评估模块用于对稽核规则的实用性、版本进行管理。6.一种基于数据相关性的数据质量稽核方法，采用权利要求1-5任一所述的系统，其特征在于，包括：步骤10、通信数据进行多维度抽样，获取抽样数据；步骤20、根据需求自定义稽核规则对所述抽样数据的指标进行基础的数据稽核；步骤30、对所述抽样数据多个相关的指标进行相关性分析，获取所述多个相关的指标的相关性指数。7.根据权利要求6所述的基于数据相关性的数据质量稽核方法，其特征在于，所述步骤10包括：步骤11、对通信业务数据进行时序抽样；
步骤12、对通信业务数据进行随机、等距、分层抽样。8.根据权利要求7所述的基于数据相关性的数据质量稽核方法，其特征在于，所述步骤200包括：步骤21、获取所述稽核系统稽核规则；步骤22、根据相关性分析需求，对所述系统稽核规则进行自定义修正，获取自定义稽核规则；步骤23、将所述自定义稽核规则注册到系统中，以便再次利用该稽核规则进行通信数据质量评估。9.根据权利要求8所述的基于数据相关性的数据质量稽核方法，其特征在于，所述步骤30包括：步骤31、判断相关性指数是否达到预期阈值；步骤32、若所述相关性指数未达到预期阈值，则对评估的通信业务指标进行深度稽核；步骤33、将基于自定义稽核规则的相关性分析算法更新到算法库中。10.根据权利要求6-9任一所述的基于数据相关性的数据质量稽核方法，其特征在于，所述方法还包括：步骤40、对所述稽核规则的实用性进行评分管理；步骤50、对所述稽核规则的使用方式及版本进行评分管理。

技术总结
本发明公开了一种基于数据相关性的数据质量稽核系统及方法，用于对通信数据质量进行评估，包括数据抽样模块、稽核规则模块、相关性分析模块；数据抽象模块用于对通信数据进行多维度抽样，获取抽样数据；稽核规则模块用于根据需求自定义稽核规则对抽样数据的指标进行稽核；相关性分析模块用于对抽样数据多个相关的指标进行相关性分析，判断该相关性是否达到规定阈值。还公开了一种方法。实施本发明，从多维指标相关性出发，衡量数据质量，解决了现有稽核规则中的无法准确确定数据质量的问题。稽核规则中的无法准确确定数据质量的问题。稽核规则中的无法准确确定数据质量的问题。


技术研发人员：江万成 何伟国 钟湘飞
受保护的技术使用者：北京红山信息科技研究院有限公司
技术研发日：2021.12.29
技术公布日：2022/4/29