首页 > 其他分享 >日志平台loki

日志平台loki

时间:2024-02-22 13:55:28浏览次数:30  
标签:index web 平台 loki cdp 日志 data store

其他

loki.yaml

auth_enabled: false

server:
  http_listen_port: 3100

ingester:
  lifecycler:
    address: 127.0.0.1
    ring:
      kvstore:
        store: inmemory
      replication_factor: 1
    final_sleep: 0s
  chunk_idle_period: 5m
  chunk_retain_period: 30s

schema_config:
  configs:
  - from: 2020-05-15
    store: boltdb-shipper
    object_store: filesystem
    schema: v11
    index:
      prefix: index_
      period: 24h

storage_config:
  boltdb_shipper:
   active_index_directory: /data/loki/data/index
   cache_location: /data/loki/data/index/cache
   shared_store: filesystem

  filesystem:
    directory: /data/loki/data/chunks

limits_config:
  enforce_metric_name: false
  reject_old_samples: true
  reject_old_samples_max_age: 720h
  per_stream_rate_limit: "20MB"
  ingestion_rate_strategy: local
  max_streams_per_user: 0
  ingestion_rate_mb: 1024
  ingestion_burst_size_mb: 1024
  retention_period: 720h

compactor:
  working_directory: /data/loki/data/compactor
  shared_store: filesystem
  compaction_interval: 10m
  retention_enabled: true

promtail-config.yaml

server:
  http_listen_port: 9080
  grpc_listen_port: 0

positions:
  filename: /tmp/positions.yaml

clients:
  - url: http://192.168.10.206:3100/loki/api/v1/push

scrape_configs:
- job_name: cdp-file-web
  static_configs:
  - targets:
      - 192.168.10.17
    labels:
      job: cdp-file-web
      env: prd
      ip: 192.168.10.17
      __path__: /data/logs/cdp-file-web/cdp-file-web.log 
  pipeline_stages:
  - match:
      selector: '{job="cdp-file-web"}'
      stages:
        - multiline:
            firstline: '^\[' # 匹配日志的正则表达式
            max_wait_time: 3s
        - regex:
            expression: '^\[.+] \[(?P<time>\d{4}-\d{2}-\d{2} \d{2}:\d{2}:\d{2})\]\['
        - labels:
            time:
        - timestamp:
            format: "2006-01-02 15:04:05"
            source: time
            location: Asia/Shanghai

FAQ

标签:index,web,平台,loki,cdp,日志,data,store
From: https://www.cnblogs.com/jluo/p/18027176

相关文章

  • 【调研】运维监控平台文章资源收集
    https://www.zabbix.com/OpManager智能网络监控软件卓豪https://www.manageengine.cn/network-monitoring/ZABBIX实时监控数万台设备,采集百万级指标http://grandage.cn/?bd_vid=9690304849173985139Prometheus普罗米修斯是一个开源的服务监控系统和时序数据库,其提供了通用......
  • nginx日志切割备份
    直接上脚本#!/bin/bash#源日志目录logs_path="/logs/nginx"#备份日志目录back_logs_path="${logs_path}/backup/$(date-d'yesterday'+'%F')"#创建备份目录,以日期命名,注意,每天零点整切割,开始记录新的一天的日志,备份目录应该是昨天mkdir-p${back_logs_path}#重命......
  • 智慧灌区平台功能全面解析(智慧灌区场景和核心功能)
    智慧灌区是当今精准农业的重要组成部分,其核心就是建设一个涵盖了灌区运营管理全流程、实现多源信息融合、涵盖多维度水资源全要素的智慧灌区平台。那么智慧灌区平台的功能和设备构成包括哪些呢?本文为您全面解析。()一、智慧灌区平台业务场景和核心功能智慧灌区平台主要业务......
  • logging两种记录日志的调用方式
     使用 logging.getLogger() 方式:这种方式是通过代码直接操作和配置日志记录器。如前所述,你可以创建或获取一个日志记录器实例,然后为其设置级别、添加处理器等。例如:Python1importlogging23logger=logging.getLogger('my_module')4logger.setLevel(logging.DEBUG)5......
  • 软件无线电处理平台设计方案:330-基于FMC接口的Kintex-7 XC7K325T PCIeX4 3U PXIe接口
    一、板卡概述     本板卡基于Xilinx公司的FPGAXC7K325T-2FFG900 芯片,pin_to_pin兼容FPGAXC7K410T-2FFG900 ,支持PCIeX8、64bit DDR3容量2GByte,HPC的FMC连接器,板卡支持PXIE标准协议,其中XJ3标准高速差分接口,支持PCIeX 2。软件具有windows,Linux驱动。二、功能和技术......
  • sql server配置主从同步环境下的日志收缩
    两种方法:通过图形界面逐步操作:(1)打开数据库属性窗口。(2)更改数据库恢复模式,将其从“完整”改成“简单”。(3)收缩数据库日志,选择“任务”->“收缩”。(4)收缩完成后,将数据库的恢复模式修改回“完整”.使用命令:(1)将数据库的恢复模式设置为“简单”:SQLALT......
  • Git commit日志基本规范
    Git commit日志基本规范<type>(<scope>): <subject><BLANK LINE><body><BLANK LINE><footer>对格式的说明如下:type代表某次提交的类型,比如是修复一个bug还是增加一个新的feature。所有的type类型如下:feat: 新增featurefix: 修复bugdocs: 仅仅修改了文档,比如READM......
  • 智慧安防/视频监控汇聚平台EasyCVR如何通过接口调用获取设备录像回看流地址?
    视频云存储/视频融合/安防监控EasyCVR视频汇聚系统可兼容各品牌的IPC、NVR、移动单兵、智能手持终端、移动执法仪、无人机、布控球等设备的接入,支持的接入协议包括:国标GB28181、RTSP/Onvif、RTMP,以及厂家的私有协议与SDK,如:海康ehome、海康sdk、大华sdk、宇视sdk、华为sdk、萤石云s......
  • SRM数字化采购管理平台-招投标管理系统-供应链协同|招投标|询比价(源码及功能分析)
    前言:通过数字化手段,采购管理可以更加高效、准确和透明。数字化采购管理系统可以集成各个流程环节,实现数据共享和协同工作,提高采购效率和成本控制能力。同时,数字化采购管理也有助于加强与供应商之间的沟通和协作,优化供应链管理,提升企业的竞争力。1.供应商准入:1)定义:评估供应商的......
  • Dynamics 365开启审计日志
    1.启用审核选择设置(齿轮图标)>高级设置>系统设置>审核选项卡。或者,从 PowerApps主页,选择设置(齿轮图标)>高级设置>设置>审核>全局审核设置。在审核设置下,启用以下复选框:启动审核(StartAuditing)审核用户访问(Audituseraccess)(注意:仅捕获用户登录)启动读取审核(St......