一种日志处理方法、装置、电子设备及计算机可读介质与流程
- 国知局
- 2024-08-02 14:57:13
本技术涉及计算机,尤其涉及一种日志处理方法、装置、电子设备及计算机可读介质。
背景技术:
1、目前,随着云技术的不断发展,作为底座的云平台需要处理的业务一直在增长,承载的应用也越来越多,云主机作为很多应用的载体在云平台上至关重要,云主机系统日志业务应用后续的开发迭代和线上运维起到关键作用,所以作为需要业务跑在云主机上的业务方,应用能否接入日志系统就显得至关重要,一般业务方可以采用预埋代理一类的被动采集方式或者调用平台接口方式一类的主动方式与云平台日志服务交互,此外由于日志服务只能接收特定格式的日志数据,业务方还需要对日志格式进行适配。无论是被动采集还是主动上报,都需要作为用户端的业务方进行改造,才能接入云平台的日志系统,对于公开的发行版镜像业务方可以很简单的通过安装采集代理或者安装其他软件被动或主动的上报日志,接入云日志系统,但是一些封闭的三方系统镜像,比如某些系统裁剪了内核导致上述日志采集/上报软件无法安装,同时由于是封闭系统或外部厂商提供的系统,导致无法改造或改造成本过高,面对这种系统镜像,业务方就无法快速无损的接入到云平台日志系统中,从而导致对日志处理的效率和准确率低。
技术实现思路
1、有鉴于此,本技术实施例提供一种日志处理方法、装置、电子设备及计算机可读介质,能够解决现有的对一些封闭的三方系统镜像的系统日志处理的效率和准确率低的问题。
2、为实现上述目的,根据本技术实施例的一个方面,提供了一种日志处理方法,包括:
3、响应于日志处理请求,获取对应的云主机标识和封闭系统镜像标识,进而基于云主机标识和封闭系统镜像标识,获取对应的系统日志;
4、调用外发服务以将系统日志转换为报文外发至代理服务器,触发代理服务器基于报文执行地址校验,响应于校验通过,转发报文至日志转发服务器;
5、调用日志转发服务器以基于报文获取用户标识和公有云日志服务标识,进而对报文进行解析和重新封装,以生成目标格式日志数据;
6、调用应用编程接口,以将目标格式日志数据通过公有云网关发送至公有云日志服务标识对应的公有云日志系统,以使得公有云日志系统基于用户标识和公有云日志服务标识将目标格式日志数据存储入库。
7、可选地,获取对应的系统日志,包括:
8、获取运行在云主机标识对应的云主机上的封闭系统镜像产生的系统日志,其中,封闭系统镜像与封闭系统镜像标识对应。
9、可选地,调用外发服务以将系统日志转换为报文外发至代理服务器,包括:
10、获取云主机标识对应的目的地址和目的端口;
11、调用外发服务,以将系统日志转换为报文,并发送报文至目的地址和目的端口对应的代理服务器。
12、可选地,触发代理服务器基于报文执行地址校验,包括:
13、获取报文对应的源地址,将源地址与存储的服务地址做匹配,若匹配失败则确定校验失败并将报文丢弃,若匹配成功则确定校验通过。
14、可选地,调用日志转发服务器以基于报文获取用户标识和公有云日志服务标识,包括:
15、调用日志转发服务器以获取报文对应的源地址;
16、基于源地址获取存储于云平台上的用户信息,基于用户信息确定用户标识和公有云日志服务标识。
17、可选地,对报文进行解析和重新封装,以生成目标格式日志数据,包括:
18、基于用户标识确定针对报文的解析方式,进而基于解析方式对报文进行解析以得到解析数据;
19、根据公有云日志服务标识,确定目标格式,以基于目标格式对解析数据进行封装,生成目标格式日志数据。
20、可选地,方法还包括:
21、响应于日志展示控件被触发,获取对应的目标用户标识和目标公有云日志服务标识;
22、调用目标公有云服务标识对应的公有云日志服务系统,以基于目标用户标识匹配得到对应的日志数据并展示。
23、另外,本技术还提供了一种日志处理装置,包括:
24、获取单元,被配置成响应于日志处理请求,获取对应的云主机标识和封闭系统镜像标识,进而基于云主机标识和封闭系统镜像标识,获取对应的系统日志;
25、转发单元,被配置成调用外发服务以将系统日志转换为报文外发至代理服务器,触发代理服务器基于报文执行地址校验,响应于校验通过,转发报文至日志转发服务器;
26、封装单元,被配置成调用日志转发服务器以基于报文获取用户标识和公有云日志服务标识,进而对报文进行解析和重新封装,以生成目标格式日志数据;
27、发送单元,被配置成调用应用编程接口,以将目标格式日志数据通过公有云网关发送至公有云日志服务标识对应的公有云日志系统,以使得公有云日志系统基于用户标识和公有云日志服务标识将目标格式日志数据存储入库。
28、可选地,获取单元进一步被配置成:
29、获取运行在云主机标识对应的云主机上的封闭系统镜像产生的系统日志,其中,封闭系统镜像与封闭系统镜像标识对应。
30、可选地,转发单元进一步被配置成:
31、获取云主机标识对应的目的地址和目的端口;
32、调用外发服务,以将系统日志转换为报文,并发送报文至目的地址和目的端口对应的代理服务器。
33、可选地,转发单元进一步被配置成:
34、获取报文对应的源地址,将源地址与存储的服务地址做匹配,若匹配失败则确定校验失败并将报文丢弃,若匹配成功则确定校验通过。
35、可选地,封装单元进一步被配置成:
36、调用日志转发服务器以获取报文对应的源地址;
37、基于源地址获取存储于云平台上的用户信息,基于用户信息确定用户标识和公有云日志服务标识。
38、可选地,封装单元进一步被配置成:
39、基于用户标识确定针对报文的解析方式,进而基于解析方式对报文进行解析以得到解析数据;
40、根据公有云日志服务标识,确定目标格式,以基于目标格式对解析数据进行封装,生成目标格式日志数据。
41、可选地,日志处理装置还包括展示单元,被配置成:
42、响应于日志展示控件被触发,获取对应的目标用户标识和目标公有云日志服务标识;
43、调用目标公有云服务标识对应的公有云日志服务系统,以基于目标用户标识匹配得到对应的日志数据并展示。
44、另外,本技术还提供了一种日志处理电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如上述的日志处理方法。
45、另外,本技术还提供了一种计算机可读介质,其上存储有计算机程序,程序被处理器执行时实现如上述的日志处理方法。
46、上述发明中的一个实施例具有如下优点或有益效果:本技术通过响应于日志处理请求,获取对应的云主机标识和封闭系统镜像标识,进而基于云主机标识和封闭系统镜像标识,获取对应的系统日志;调用外发服务以将系统日志转换为报文外发至代理服务器,触发代理服务器基于报文执行地址校验,响应于校验通过,转发报文至日志转发服务器;调用日志转发服务器以基于报文获取用户标识和公有云日志服务标识,进而对报文进行解析和重新封装,以生成目标格式日志数据;调用应用编程接口,以将目标格式日志数据通过公有云网关发送至公有云日志服务标识对应的公有云日志系统,以使得公有云日志系统基于用户标识和公有云日志服务标识将目标格式日志数据存储入库。从而提高对一些封闭的三方系统镜像的系统日志处理的效率和准确率。
47、上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
本文地址:https://www.jishuxx.com/zhuanli/20240801/244446.html
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 YYfuon@163.com 举报,一经查实,本站将立刻删除。