一种水利行业数据自助分析系统的制作方法

本发明涉及水利行业数据分析，具体涉及一种水利行业数据自助分析系统。

背景技术：

1、在当今日新月异的科技时代，数字化转型已经不再是一个可选项，而是许多行业生存和发展的必经之路。特别是对于那些与国民生活息息相关的行业，如水利行业，数字化转型的重要性更是不言而喻。随着大数据、云计算、人工智能等技术的不断进步，如何更好地利用这些数据资源，挖掘其潜在价值，已经成为数字化转型中的关键一环。

2、在水利行业中，数据的精确度、实时性直接关系到各种决策的质量和执行效果。无论是制定紧急的应急预案，还是规划日常的供取水计划，都离不开准确、及时的数据支持。

3、然而，目前水利行业中在数据分析利用方面还面临着一些挑战。现有的工具和方法大多以定制化开发或低代码平台为主，这些方式虽然能够满足一些基本的分析需求，但在应对用户个性化、自定义的数据分析场景时，就显得力不从心。设计一款面向业务使用主体的数据检索工具，帮助水利行业的用户更好地利用数据资源，提高数据分析的效率和准确性是本申请要解决的技术问题。

技术实现思路

1、针对现有的工具和方法大多以定制化开发或低代码平台为主，这些方式虽然能够满足一些基本的分析需求，但在无法应对用户个性化、自定义的数据分析场景的问题，本发明提供一种水利行业数据自助分析系统。

2、本发明技术方案提供一种水利行业数据自助分析系统，包括检索配置管理模块、检索规则管理模块、数据管理模块和数据检索模块；

3、检索配置管理模块，对检索频道、分类项、数据字典属性进行配置管理；

4、检索规则管理模块，对已维护的检索规则进行上下线管理，设置只有上线的规则才在检索界面进行展示；

5、数据管理模块，接收来自库表的数据和通过接口传输的数据，并对接收到的数据进行整合处理；将基础数据、监测数据和指标数据进行关联，并通过过滤操作生成一体化的宽表数据；

6、数据检索模块，基于已配置的检索规则，按照不同的维度和分类项，根据用户的输入，对已有上线的分析对象进行多样化的展示。

7、作为本发明技术方案的进一步限定，该系统还包括分析规则配置模块，基于维护的数据检索频道、分类项建立对应的分析规则；每个分类型仅维护一个规则。

8、作为本发明技术方案的进一步限定，检索配置管理模块包括检索频道管理单元和数据字典管理单元；

9、检索频道管理单元，设置自定义数据检索频道及频道的分类项，使检索界面按照自定义类型进行分类展示；

10、数据字典管理单元，针对枚举类数据进行数据字典的维护或导入，使数据检索界面针对字典项进行下拉框展示。

11、作为本发明技术方案的进一步限定，检索频道管理单元，设计并实现一个用户友好的频道定义界面，允许用户创建、编辑和删除数据检索频道，使用户能够定义频道的基本信息；在频道定义界面中，允许用户为每个频道定义分类项，用户应能够设置分类项的层级结构；将用户定义的频道和分类项信息存储在存储介质中；在数据检索界面中，集成用户定义的频道和分类项；允许用户根据选择的频道和分类项进行数据检索。

12、作为本发明技术方案的进一步限定，数据字典管理单元，在数据库表或接口中识别出枚举类数据，确定枚举类数据需要进行数据字典管理的范围和目标，提供一个用户友好的界面或工具，允许管理员或数据维护人员对数据字典进行维护操作，在数据库表或接口中，建立枚举类数据与数据字典项的映射关系；当数据库表或接口中的数据发生变化时，应确保相应的数据字典项得到同步更新。

13、作为本发明技术方案的进一步限定，数据管理模块包括数据源管理单元、数据域管理单元和数据集管理单元；

14、数据源管理单元，用于接收来自库表的数据和通过接口传输的数据，并对接收到的数据进行整合；

15、数据域管理单元，用于针对数据源已接入的数据库表，通过脚本的方式将基础数据、监测数据、指标数据进行关联过滤，生成一体化的宽表；

16、数据集管理单元，针对接口数据需要进行层级转换，确定数据分析的维度、指标信息。

17、作为本发明技术方案的进一步限定，数据源管理单元，具体用于设计并实现库表数据访问逻辑，设计并实现接口数据接收逻辑，监听接口调用并捕获传输的数据；对接收到的库表数据和接口数据进行验证；对接收到的数据进行清洗，去除重复、冗余或无效的数据记录；分析库表数据和接口数据的结构和含义，确定它们之间的关联关系和整合逻辑，将库表数据和接口数据进行关联和合并，形成一个完整的数据集；使用数据库查询、编程逻辑或数据处理工具来实现数据整合操作，对整合后的数据进行转换和映射；将整合并转换后的数据存储到适当的存储介质中。

18、作为本发明技术方案的进一步限定，数据域管理单元，具体用于接收基础数据、监测数据和指标数据，对数据进行初步清洗，分析基础数据、监测数据和指标数据，确定它们之间的关联键，确保关联键在三种数据类型中均存在且匹配，使用数据库查询语言或数据处理工具，根据关联键将基础数据、监测数据和指标数据进行关联；对关联后的数据进行过滤形成初步的数据集；将过滤后的数据集整合为一个宽表，将宽表数据存储到适当的存储介质中。

19、作为本发明技术方案的进一步限定，数据集管理单元，具体用于接收接口返回的原始数据；解析原始数据结构，理解字段含义和数据关联；根据预设的层级转换规则或用户指定的转换逻辑，将原始数据转换为具有层级结构的新数据集；将转换后的层级数据集存储在指定的存储介质中；从层级转换后的数据集中确定数据分析的维度，从层级转换后的数据集中确定数据分析的指标；对层级转换后的数据集进行预处理和整合，以满足数据分析的需求；利用整合后的数据集进行数据分析和可视化展示。

20、作为本发明技术方案的进一步限定，数据检索模块，基于已配置的检索规则，按照不同的维度和分类项，根据用户的输入，对已有上线的分析对象进行多样化的展示。

21、从以上技术方案可以看出，本发明具有以下优点：基于动态可配置方式，实现数据定制化数据分析和指标分析，方便用户按照不同的业务类型进行定制化的配置检索数据。可以将外部系统已经成熟的指标、视图纳入监测范围，而不需要重复实现。能够更加方便的管理水利行业各项重点数据，为预警、决策提供高精度的参考。检索后的数据可以支持按照需求导出，方便线下针对性的统计分析。

22、此外，本发明设计原理可靠，结构简单，具有非常广泛的应用前景。

23、由此可见，本发明与现有技术相比，具有突出的实质性特点和显著地进步，其实施的有益效果也是显而易见的。

技术特征：

1.一种水利行业数据自助分析系统，其特征在于，包括检索配置管理模块、检索规则管理模块、数据管理模块和数据检索模块；

2.根据权利要求1所述的水利行业数据自助分析系统，其特征在于，该系统还包括分析规则配置模块，基于维护的数据检索频道、分类项建立对应的分析规则；每个分类型仅维护一个规则。

3.根据权利要求2所述的水利行业数据自助分析系统，其特征在于，检索配置管理模块包括检索频道管理单元和数据字典管理单元；

4.根据权利要求3所述的水利行业数据自助分析系统，其特征在于，检索频道管理单元，设计并实现一个用户友好的频道定义界面，允许用户创建、编辑和删除数据检索频道，使用户能够定义频道的基本信息；在频道定义界面中，允许用户为每个频道定义分类项，用户应能够设置分类项的层级结构；将用户定义的频道和分类项信息存储在存储介质中；在数据检索界面中，集成用户定义的频道和分类项；允许用户根据选择的频道和分类项进行数据检索。

5.根据权利要求4所述的水利行业数据自助分析系统，其特征在于，数据字典管理单元，在数据库表或接口中识别出枚举类数据，确定枚举类数据需要进行数据字典管理的范围和目标，提供一个用户友好的界面或工具，允许管理员或数据维护人员对数据字典进行维护操作，在数据库表或接口中，建立枚举类数据与数据字典项的映射关系；当数据库表或接口中的数据发生变化时，应确保相应的数据字典项得到同步更新。

6.根据权利要求5所述的水利行业数据自助分析系统，其特征在于，数据管理模块包括数据源管理单元、数据域管理单元和数据集管理单元；

7.根据权利要求6所述的水利行业数据自助分析系统，其特征在于，数据源管理单元，具体用于设计并实现库表数据访问逻辑，设计并实现接口数据接收逻辑，监听接口调用并捕获传输的数据；对接收到的库表数据和接口数据进行验证；对接收到的数据进行清洗，去除重复、冗余或无效的数据记录；分析库表数据和接口数据的结构和含义，确定它们之间的关联关系和整合逻辑，将库表数据和接口数据进行关联和合并，形成一个完整的数据集；使用数据库查询、编程逻辑或数据处理工具来实现数据整合操作，对整合后的数据进行转换和映射；将整合并转换后的数据存储到适当的存储介质中。

8.根据权利要求7所述的水利行业数据自助分析系统，其特征在于，数据域管理单元，具体用于接收基础数据、监测数据和指标数据，对数据进行初步清洗，分析基础数据、监测数据和指标数据，确定它们之间的关联键，确保关联键在三种数据类型中均存在且匹配，使用数据库查询语言或数据处理工具，根据关联键将基础数据、监测数据和指标数据进行关联；对关联后的数据进行过滤形成初步的数据集；将过滤后的数据集整合为一个宽表，将宽表数据存储到适当的存储介质中。

9.根据权利要求8所述的水利行业数据自助分析系统，其特征在于，数据集管理单元，具体用于接收接口返回的原始数据；解析原始数据结构，理解字段含义和数据关联；根据预设的层级转换规则或用户指定的转换逻辑，将原始数据转换为具有层级结构的新数据集；将转换后的层级数据集存储在指定的存储介质中；从层级转换后的数据集中确定数据分析的维度，从层级转换后的数据集中确定数据分析的指标；对层级转换后的数据集进行预处理和整合，以满足数据分析的需求；利用整合后的数据集进行数据分析和可视化展示。

10.根据权利要求9所述的水利行业数据自助分析系统，其特征在于，数据检索模块，基于已配置的检索规则，按照不同的维度和分类项，根据用户的输入，对已有上线的分析对象进行多样化的展示。

技术总结本发明属于水利行业数据分析技术领域，具体提供一种水利行业数据自助分析系统，包括检索配置管理模块，对检索频道、分类项、数据字典属性进行配置管理；检索规则管理模块，对已维护的检索规则进行上下线管理，设置只有上线的规则才在检索界面进行展示；数据管理模块，接收来自库表的数据和通过接口传输的数据，并对接收到的数据进行整合处理；将基础数据、监测数据和指标数据进行关联，并通过过滤操作生成一体化的宽表数据；数据检索模块，基于已配置的检索规则，按照不同的维度和分类项，根据用户的输入，对已有上线的分析对象进行多样化的展示。方便用户按照不同的业务类型进行定制化的配置检索数据。技术研发人员：闫海旺,曲建龙,房爱印,尹曦萌,王旭恒受保护的技术使用者：山东浪潮智水数字科技有限公司技术研发日：技术公布日：2024/7/25