首页 > 其他分享 >解决es存储的日志显示不完整问题

解决es存储的日志显示不完整问题

时间:2023-05-30 16:11:28浏览次数:53  
标签:fluentd 存储 xx es template 日志 模板

背景:通过服务的实时日志和从kibana中查询到的不一致,实时日志会显示的更多。

解决方法:
修改fluentd configmap 按照下图 的方式

fluentd 配置中filter 下,如图 下图 位置 增加以下配置


`# Concatenate multi-line logs (>=16KB)

  <filter kubernetes.**>

    @type concat

    key log

    use_first_timestamp true

    multiline_end_regexp /\n$/

    separator ""

  </filter>`

修改完成后,删除或重启服务触发重载。

然后删除索引模板,flutend会自动重新创建模板
Curl -XDELETE -k -uadmin:xxxxxxxx https://xx.xx.xx.xx:9200/_template/tenx_template

最后查询模板类型是否为 text
curl -k -uadmin:xxxxxxxxx https://xx.xx.xx.xx:9200/_template/tenx_template

标签:fluentd,存储,xx,es,template,日志,模板
From: https://www.cnblogs.com/putaoo/p/17443508.html

相关文章

  • springboot-解决项目编译后resources下文件生成乱码问题
    SpringBoot项目下resources文件项目编译之后resources下文件会生成乱码,是说明maven打包的时候出现问题缺少一个插件<plugin><groupId>org.apache.maven.plugins</groupId><artifactId>maven-resources-plugin</artifactId>......
  • CF1398E Two Types of Spells 题解 set
    题目链接:https://codeforces.com/problemset/problem/1398/E题目大意你有一个集合,初始为空。有两种类型的元素,一种是普通元素,一种是强化元素,两种元素都有一个数值。有\(n\)次操作,每次操作会往集合中加入一个元素或者删除一个元素。每次操作后,你都需要确定集合中元素的一个......
  • android开发java.lang.NoClassDefFoundError: org/jetbrains/kotlin/cli/common/Prope
    问题:编译Android项目出现java.lang.NoClassDefFoundError:org/jetbrains/kotlin/cli/common/PropertiesKt原因:项目使用发JDK版本和Kotlin版本不一致或者说不对应导致gradle找不到对应的类解决方法:我的解决方法是降低JDK的版本到1.8,具体操作是OpenModulesSettings->SDKLoc......
  • 活动回顾|阿里云 Serverless 技术实战与创新上海站回放&PPT下载
    5月27日“阿里云Serverless技术实战与创新”上海站圆满落幕。活动现场邀请了来自阿里云一线技术专家,分享当前Serverless趋势和落地实践过程中的挑战和机遇;带来数据库Serverless技术架构及应用实践;浅析云原生时代开发者需要的Serverless能力,为开发者日常应用,就业、提升......
  • 在node项目中使用log4.js记录日志
    1.在项目根目录创建保存日志文件的文件夹logs2.修改.gitignore文件,添加logs文件夹,这样使用git提交进忽略logs文件夹。node_modules.envlogs3.在config文件夹下新增log4j.js文件保存log4js的配置,路径:./src/config/log4j.js//config.jsletpath=require('pat......
  • prometheus Loki日志采集分析工具,loki与ELK的区别
    一、Loki是什么?Loki是由GrafanaLabs开源的一个水平可扩展、高可用性,多租户的日志聚合系统的日志聚合系统。它的设计初衷是为了解决在大规模分布式系统中,处理海量日志的问题。Loki采用了分布式的架构,并且与Prometheus、Grafana密切集成,可以快速地处理大规模的日志数据。该项目......
  • .net压缩文件(System.IO.Compression.ZipFile)
    NuGet安装System.IO.Compression.ZipFile,注意不是System.IO.Compression优点:不同于ICSharpCode.SharpZipLib.dll的地方是,这个插件可以直接压缩文件夹,文件夹内的文件自动压缩进去了,ICSharpCode.SharpZipLib.dll需要一个一个将文件添加进压缩包,不能直接压缩文件夹1ZipFile.Creat......
  • Wallys/Qualcomm network chip/ipq9574/ipq9554/wireless connectivity solutions.
     QualcommWi-Fi7networkchipsolutionsIPQ9574andIPQ9554areadvancedwirelessconnectivitysolutionsdevelopedbyQualcommTechnologies.ThesechipsaredesignedtosupporttheWi-Fi7(802.11be)standard,whichofferssignificantimprovementsinspe......
  • Good-bye ESNI, hello ECH !(ESNI 与 ECH 的前世今生)
    在当时介绍TLS的最后,提到过虽然TLS能够加密整个通信过程,但是在协商的过程中依旧有很多隐私敏感的参数不得不以明文方式传输,其中最为重要且棘手的就是将要访问的域名,即SNI(ServerNameIndication)。同时还有用于告知客户端可用的应用层协议的ALPN拓展,泄露这个会导致攻击者知......
  • 4万多论坛头像个性头像ACCESS数据库
    在之前就弄到过个性网名和论坛签名的数据,比如有《8万多个网名大全QQ网名ACCESS数据库》、《个性网名大全网络名称大全ACCESS数据库》《2万多条QQ签名论坛签名大全ACCESS数据库》、《24万QQ伤感签名论坛签名ACCESS数据库》、《近2万签名的句子网络签名ACCESS数据库》、《上万条个性......