V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
Jiubia
V2EX  ›  程序员

请教一个 loki 索引的问题

  •  
  •   Jiubia · Jun 26, 2024 · 814 views
    This topic created in 684 days ago, the information mentioned may be changed or developed.

    前提:没有用相关的日志推送工具,现在是将 SPLUNK 上的日志原封不动的拉取下来然后通过 push 接口重新推到 loki ,splunk 日志量大约日 500G

    因为原封不动推数据的时候,把 splunk 上所有的标签也作为 loki 日志的标签( labels )发上去了,然后发现 index 文件特别大,backend 服务在压缩的时候就会频繁 oom

    后来就使用标签白名单的形式,只保留了 host 、splunk_server 等 4 个标签,但是现在发现 loki 里的 index 文件一直是几天前的,而且查不到最近几天的日志

    No Comments Yet
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   4026 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 04:20 · PVG 12:20 · LAX 21:20 · JFK 00:20
    ♥ Do have faith in what you're doing.