一种具有透视分析和数据自助分析的数据引擎的制作方法

本发明涉及视频彩铃，特别涉及一种具有透视分析和数据自助分析的数据引擎。

背景技术：

1、数据引擎是一个软件系统，它能够处理、分析和解释大量数据，以便用户可以快速获得洞察力和做出决策。数据引擎的设计旨在提高数据处理的效率和准确性，同时降低数据分析的复杂性，使得非技术用户也能够理解和利用数据。但目前现有的用于支撑视频彩铃业务的数据引擎，需要单独的事务处理和数据分析系统，复杂性程度高；并且现有的数据引擎难以适应业务运营与决策人员灵活多变的数据需求，并且对非技术背景的用户不友好，操作难度大，数据分析的受众范围小。

2、因此，本发明提供了一种具有透视分析和数据自助分析的数据引擎。

技术实现思路

1、本发明的一种具有透视分析和数据自助分析的数据引擎，不仅可以满足业务运营与决策人员灵活多变的数据需求，还降低了操作难度。

2、本发明提供了一种具有透视分析和数据自助分析的数据引擎，包括引擎平台，所述引擎平台包括数据采集及开发模块、自助分析模块、透视分析模块和展示模块；其中，

3、所述数据采集及开发模块用于接收视频彩铃请求，生成视频彩铃实时任务；

4、所述自助分析模块用于根据视频彩铃实时任务，确定视频彩铃实时任务的分析处理路径；

5、所述透视分析模块根据分析处理路径，确定对应的htap驱动模块，自动加载匹配视频彩铃实时任务，生成透视分析结果；

6、所述展示模块用于将透视分析结果进行展示。

7、在一种可实施的方式中，所述htap驱动模块集成在htap集成引擎中；其中，

8、htap集成引擎包括：引擎集成单元、数据互通单元和集群节点单元。

9、在一种可实施的方式中，所述集群节点单元由oltp和olap两个数据库节点组成，oltp节点采用事务性的行式存储，对外提供数据的增删改查服务；olap节点数据采用列式存储，对外提供查询sql的高性能统计分析功能。

10、在一种可实施的方式中，所述引擎集成单元用于统筹oltp节点和olap节点的运行，执行集群节点单元的数据落地和数据计算的调度；其包括解析调度模块、透明解析模块、规则分发汇聚模块、按需分发模块、引擎状态监测模块和自定义函数集成模块；其中，

11、所述规则分发汇聚模块用于根据oltp和olap的规则生成执行计划，在节点进行分布式并行计算，并汇聚结果集。

12、在一种可实施的方式中，所述oltp节点包括计划执行模块、数据库解析模块、任务管理模块、事物安全模块、计划生成模块和集群状态管理模块；olap节点包括向量化处理模块、编码压缩模块、多索引模块、物化视图和近似查询模块。

13、在一种可实施的方式中，所述数据互通单元用于支持oltp与olap数据库节点双向同步，并保持表数据一致。

14、在一种可实施的方式中，引擎平台还包括血缘分析模块，所述血缘分析模块用于追踪和分析数据的来源、流向和关系；根据用户的视频彩铃请求分析数据生命周期中的传递路径和衍生关系的过程。

15、在一种可实施的方式中，所述展示模块还用于将数据血缘分析结果通过图形化的方式展示。

16、在一种可实施的方式中，所述数据采集及开发模块为可视化工具或配置化平台。

17、在一种可实施的方式中，所述引擎平台还包括实时计算模块，所述实时计算模块支持多种数据处理模式，用于对连续不断的数据流进行实时处理。

18、本发明可以实现的有益效果为：本申请的引擎平台用于提升数据引擎能力，以支撑视频彩铃业务发展，引擎平台包括数据采集及开发模块、自助分析模块、透视分析模块和展示模块四个模块，四个模块紧密配合，共同实现提升数据能力，以实现支持视频彩铃业务决策和运营的目的。

19、本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

20、下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

技术特征：

1.一种具有透视分析和数据自助分析的数据引擎，包括引擎平台，其特征在于，所述引擎平台包括数据采集及开发模块、自助分析模块、透视分析模块和展示模块；其中，

2.如权利要求1所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述htap驱动模块集成在htap集成引擎中；其中，

3.根据权利要求2所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述集群节点单元由oltp和olap两个数据库节点组成，oltp节点采用事务性的行式存储，对外提供数据的增删改查服务；olap节点数据采用列式存储，对外提供查询sql的高性能统计分析功能。

4.根据权利要求3所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述引擎集成单元用于统筹oltp节点和olap节点的运行，执行集群节点单元的数据落地和数据计算的调度；其包括解析调度模块、透明解析模块、规则分发汇聚模块、按需分发模块、引擎状态监测模块和自定义函数集成模块；其中，

5.如权利要求4所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述oltp节点包括计划执行模块、数据库解析模块、任务管理模块、事物安全模块、计划生成模块和集群状态管理模块；olap节点包括向量化处理模块、编码压缩模块、多索引模块、物化视图和近似查询模块。

6.如权利要求4所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述数据互通单元用于支持oltp与olap数据库节点双向同步，并保持表数据一致。

7.如权利要求1所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，引擎平台还包括血缘分析模块，所述血缘分析模块用于追踪和分析数据的来源、流向和关系；根据用户的视频彩铃请求分析数据生命周期中的传递路径和衍生关系的过程。

8.如权利要求7所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述展示模块还用于将数据血缘分析结果通过图形化的方式展示。

9.如权利要求1所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述数据采集及开发模块为可视化工具或配置化平台。

10.如权利要求1所述的一种具有透视分析和数据自助分析的数据引擎，其特征在于，所述引擎平台还包括实时计算模块，所述实时计算模块支持多种数据处理模式，用于对连续不断的数据流进行实时处理。

技术总结本发明提供了一种具有透视分析和数据自助分析的数据引擎，包括引擎平台，引擎平台包括数据采集及开发模块、自助分析模块、透视分析模块和展示模块。数据采集及开发模块用于接收用户的视频彩铃请求，生成视频彩铃实时任务；自助分析模块用于根据视频彩铃实时任务，确定视频彩铃实时任务的分析处理路径；透视分析模块根据分析处理路径，确定对应的HTAP驱动模块，自动加载匹配视频彩铃实时任务，生成透视分析结果；展示模块用于将透视分析结果进行展示。本发明用于提升数据引擎能力，以支撑视频彩铃业务。技术研发人员：吴伟华,张晶晶,陈家志,乔治,李雪欣,汪秋波,邹西山,李韩,罗岚,弋翔,罗志亮,温雪阳,邓宇翔,陈静娴,陈星受保护的技术使用者：联通沃音乐文化有限公司技术研发日：技术公布日：2024/7/29