微服务日志管理
微服务日志文件存储方式
所有日志存储到统一路径目录下,以微服务名称命名子目录分别存储,平台功能调试完成后,运行日志级别调整为ERROR级别
清理及备份
通过配置定时任务及shell脚本,根据现场要求对日志文件进行压缩备份、转储及清理操作。
如无特殊要求服务运行日志保留7天,不做转储操作
大数据组件日志
日志存储方式
日志文件均存储在组件的安装目录下,安装目录通过环境变量进行管理
清理及备份
部分大数据组件本身已支持日志管理分割功能,可根据具体要求在相关配置文件进行修改,对没有日志管理功能的组件,采用配置定时任务及shell脚本的方式进行管理,包括压缩备份、转储及清理等操作;
如无特殊要求服务运行日志保留7天,不做转储操作。
数据存储
针对平台采集到的业务数据和平台自身产生的业务数据,采取统一的数据存储方式,平台在规划中单独配备了数据节点,并为数据节点划分了大容量的存储设备,支持NFS、NAS、本地磁盘等多种方式
数据存储采用了cyberdfs分布式存储系统,具备对不同数据节点的数据进行相互备份的能力,保障了数据的可用性,并支持数据节点的横向扩容,也可以直接对当前数据节点的存储设备进行扩容操作
业务数据系统默认永久保留,不做清理操作,可根据具体业务情况,对数据进行统一的备份、清理及转储等操作