关于日志收集，有比较好的工具推荐吗？

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

This topic created in 3042 days ago, the information mentioned may be changed or developed.

项目模型比较简单，主要是使用 flask，使用 supervisor 托管
所以日志是 supervisor 的日志和 celery 的日志。
同时服务器分测试服务器和正式服务器
有没有一个工具能把多台电脑上的多个文件的日志集中收集到一个地方？
以及对于日志这块，各位的最佳实践都是什么？欢迎分享

日志

Supervisor

服务器

flask

17 replies • 2018-07-12 20:47:49 +08:00

zhengxiaowai

Jul 11, 2018

sentry ？

lululau

Jul 11, 2018

ELK 啊，如果没有分析的需求，简单一点可以只用 FileBeat 来做汇集

FiveDDD

Jul 11, 2018

腾讯云有日志服务，目前免费(内测阶段，勉强够用)，也可以考虑国外的 loggly （很成熟）之类的。

strict

Jul 11, 2018

@zhengxiaowai 这个工具目前来看还不错，ELK 相比就有点太大了。

strict

Jul 11, 2018

@FiveDDD 腾讯云你们正式业务有在用吗？

tingyunsay

Jul 11, 2018

瞎几把说，日志切好，写通用脚本 hadoop put ..，hdfs 存储（分 ip ）

lbp0200

Jul 11, 2018

老乡，rsyslog，了解一下，系统自带

cirton

Jul 11, 2018

flume ?

glacer

Jul 11, 2018

只是日志收集的话，那就是 logstash 啊

welkinzh

Jul 11, 2018

目前在用 filebeat + elasticsearch

eastrd

Jul 11, 2018 via Android

Splunk 全家桶

jinwyp

Jul 11, 2018

看了回答, 混乱了. 原来日志没有最佳实践.

ideascf

Jul 11, 2018

@zhengxiaowai sentry 不适合用来做日志收集，而是用来做异常（日志）收集。

SevenJ

Jul 11, 2018

没有特别需求，只是 tail 日志文件的话 rsyslog 足矣
BTW, rsyslog 可以直接打日志到 kafka

jemygraw

Jul 11, 2018

用七牛的 logkit，直接打到云端。https://github.com/qiniu/logkit

p23XnFNH1Wq953rV

Jul 12, 2018

graylog

shenxgan

Jul 12, 2018

推荐一下 flume，架构简单，实用