最近项目想要搭建一个数据接入平台,但是苦于刚刚接触运营运维,对很多技术栈不太了解,想请教一下各位。
实现一个数据平台,对终端的操作日志数据上报(例如,客户端点击事件日志,操作请求成功 /失败日志等等),之前一直使用 InfluxDB 进行数据的存储,但是用户量上来,内存就爆了。 想要重构这个服务,搭建一个数据接入平台进行统一的数据采集存储、自定义数据格式、监控等等功能。同事配合 Grafana 进行数据显示。这里的可能更多是面向业务运维的东西
1
opengps 2019-08-12 08:18:42 +08:00 via Android
采集只进消息队列,避免对原业务造成影响
|
2
bantao 2019-08-12 09:40:06 +08:00
ELK
|
3
kennyliu 2019-08-12 17:27:38 +08:00
InfluxDB 时序数据库了解一下 纳秒级别数据记录
|