V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
craftx
V2EX  ›  问与答

求一个轻量级的结构化指标监控+日志存储和查询解决方案

  •  
  •   craftx · 2023-06-09 17:06:43 +08:00 · 995 次点击
    这是一个创建于 567 天前的主题,其中的信息可能已经有所发展或是发生改变。
    日志本身已经是结构化的。
    日志含指标数据。比如执行了哪个 sql ,调了哪个 api

    目前的日志方案:
    系统内启动一个 influxdb2 服务,每个服务通过 http 直接将日志批量写入到 influxdb 。
    influxdb2 自带 gui ,通过查询语句查询出日志,表格模式展示(看起来有点别扭)。
    但实际使用时,发现,查询日志很慢,查询日志中的指标数据却很快。了解 influxdb 的设计后,发现,因为查询指标只读了一个字段,查询日志却读了全部字段。设计对查询全部字段很不友好。

    所以,想问问,有没有替代方案。
    说明下,目前还是小系统、微型团队,没精力搞整套。所以最好是一个服务搞定,资源消耗还低,维护简单。
    2 条回复    2023-06-09 17:46:54 +08:00
    chenzhijian
        1
    chenzhijian  
       2023-06-09 17:46:26 +08:00 via Android
    写日志用 UDP 就好,处理日志的程序一天搜一下大把
    chenzhijian
        2
    chenzhijian  
       2023-06-09 17:46:54 +08:00 via Android
    错字: 一天 改为 git
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5347 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 09:22 · PVG 17:22 · LAX 01:22 · JFK 04:22
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.