V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
cheng6563
V2EX  ›  程序员

发现个类似 ELK 的日志系统,开销比 ELK 小很多,苦于 ELK 内存和磁盘占用的都可以试试。

  •  2
     
  •   cheng6563 · 2023-08-16 17:47:37 +08:00 · 3901 次点击
    这是一个创建于 500 天前的主题,其中的信息可能已经有所发展或是发生改变。

    https://github.com/openobserve/openobserve

    我现在就在新建的测试环境用上了,日志和指标一把梭全往里存了
    文件压缩率基本就是 7z 直接压日志文件的级别,单从压缩率可以秒飞 ES
    没有专用的收集器,我是用的 vector.dev 收集日志,filebeat 他也支持

    用来查询日志的 Web UI 也挺好用,类似 SQL 的查询语法,比 Loki 那个用 Grafana UI 好用多了

    18 条回复    2024-09-09 16:25:44 +08:00
    zhangkunkyle
        1
    zhangkunkyle  
       2023-08-16 17:54:34 +08:00
    看起来不错
    sniperking1234
        2
    sniperking1234  
       2023-08-16 18:11:25 +08:00
    可惜是商业公司搞得,兼容 es 语法还得收费
    kid1412621
        3
    kid1412621  
       2023-08-16 18:31:35 +08:00
    看到最下面的 join our WeChat group 就…
    gotosre
        4
    gotosre  
       2023-08-16 19:07:46 +08:00 via iPhone
    Es
    压缩也可以配置吧
    BQsummer
        5
    BQsummer  
       2023-08-16 20:03:47 +08:00
    资源占用怎么样
    coolcoffee
        6
    coolcoffee  
       2023-08-16 21:03:48 +08:00
    ES 的日志应该也是压缩过了,因为我测过统计索引显示大小总和比实际磁盘占用要小。
    foolishcrab
        7
    foolishcrab  
       2023-08-17 00:16:32 +08:00 via iPhone
    我也是弄了好久 loki 弃用了
    明天试试这个
    0NF09LJPS51k57uH
        8
    0NF09LJPS51k57uH  
       2023-08-17 08:45:43 +08:00
    @foolishcrab 为什么弃用了 Loki ?对于熟悉 Prometheus 的人来说,Loki 简直就是 perfect ,我们实测下来压缩率接近 es 的 10 倍,还支持 Prometheus 生态告警
    cheng6563
        9
    cheng6563  
    OP
       2023-08-17 09:17:01 +08:00
    @phantomzz 自己调 API 还行,Grafana 的日志 UI 太烂了
    csh010101
        10
    csh010101  
       2023-08-17 10:41:05 +08:00
    我点进来之前就知道你说的是 oo 了
    Benana
        11
    Benana  
       2023-08-17 13:22:36 +08:00
    你是雷?
    tramm
        12
    tramm  
       2023-08-17 15:33:54 +08:00
    好东西, 下次试试.
    只在测试环境搭了 Loki,还没正式替换, 哈哈哈
    0NF09LJPS51k57uH
        13
    0NF09LJPS51k57uH  
       2023-08-17 19:23:42 +08:00
    @cheng6563 啊这,我觉得 Grafana 的 Loki datasource explore 太好用了,LogQL 也好用
    liuhai233
        14
    liuhai233  
       2023-08-18 19:41:12 +08:00 via iPhone
    不错,支持 Opentelemetry
    safeie
        15
    safeie  
       2023-08-20 19:12:45 +08:00
    @sniperking1234 我们更新了 zPlane 的描述,非商业使用,个人可免费使用。https://openobserve.ai/docs/zplane/
    sniperking1234
        16
    sniperking1234  
       2023-08-20 22:48:58 +08:00
    @safeie zPlane 没有开源是吧
    safeie
        17
    safeie  
       2023-08-22 21:23:02 +08:00
    @sniperking1234 代码还没有开源,更新 License 后会开源代码,个人使用免费,商业需要授权。
    zhangthe9
        18
    zhangthe9  
       110 天前
    好像到现在 trace 还没排序
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   953 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 20:59 · PVG 04:59 · LAX 12:59 · JFK 15:59
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.