• 请不要在回答技术问题时复制粘贴 AI 生成的内容
realfreesky
V2EX  ›  程序员

想自己搞一个日志分析系统,各位 v 友有什么好的建议不

  •  
  •   realfreesky · Mar 2, 2016 · 5978 views
    This topic created in 3899 days ago, the information mentioned may be changed or developed.
    18 replies  •  2016-03-08 17:05:30 +08:00
    xiamingchong
    xiamingchong
    Mar 2, 2016
    1
    上 elk
    noahzh
    noahzh
    Mar 2, 2016
    2
    上 elk
    lovelynn
    lovelynn
    Mar 2, 2016
    3
    什么日志,中间件日志某 60 的星图还是不错的。
    dyingbleed
    dyingbleed
    Mar 2, 2016
    4
    ElasticSearch + Logstash + Kibana
    knightdf
    knightdf
    Mar 2, 2016
    5
    有 logstash 好吗?
    jy01264313
    jy01264313
    Mar 2, 2016
    6
    推荐看一下 google dapper ,开源的有 twitter 的 zipkin
    yuankui
    yuankui
    Mar 2, 2016
    7
    你想要怎么分析?
    chinajik
    chinajik
    Mar 2, 2016
    8
    面板推荐 grafana 这个适合生产线各种需求
    HunterPan
    HunterPan
    Mar 2, 2016
    9
    flume+kafka+storm,听说 es 也很不错
    lucifer4he
    lucifer4he
    Mar 2, 2016
    10
    上 ELK + 1
    tonyVex
    tonyVex
    Mar 2, 2016
    11
    flume+kafka+storm 这个常听说的。
    hantsy
    hantsy
    Mar 2, 2016
    12
    现在这种东西好多, LogEntries 等
    hantsy
    hantsy
    Mar 2, 2016
    13
    1. 收集有效的 LOG
    2. 可视化分析结果
    mofeiwo
    mofeiwo
    Mar 2, 2016
    14
    如果量不大的话,可以 splunk
    hienchu
    hienchu
    Mar 2, 2016
    15
    ELK Stack 在用,比较成熟了,日志格式不复杂的话开发成本很低(主要是正则)
    jings
    jings
    Mar 2, 2016
    16
    正则 +1
    匹配+不匹配+时间+支持并行查询
    日志存储 日志压缩 日志备份这些也要考虑吧
    crayhuang
    crayhuang
    Mar 2, 2016
    17
    @dyingbleed 一样 ElasticSearch + Logstash + Kibana + 1
    gushan
    gushan
    Mar 8, 2016
    18
    可以考虑下阿里云日志服务。
    1 )提供了简单接入客户端( https://yq.aliyun.com/articles/3228?spm=5176.team4.teamshow1.37.faH93Z )
    2 )日志收集到服务端后提供多种消费方式:数据通道(类 Kafka )/数据投递( ODPS 、 OSS-组合 E-MapReduce Spark )/实时搜索( https://help.aliyun.com/document_detail/sls/user-guide/overview.html )
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   2955 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 60ms · UTC 11:20 · PVG 19:20 · LAX 03:20 · JFK 06:20
    ♥ Do have faith in what you're doing.