求教，统计报表如何计算并写入宽表

• 请不要在回答技术问题时复制粘贴 AI 生成的内容

This topic created in 1819 days ago, the information mentioned may be changed or developed.

现在自己想的解决办法有以下几个:

1: 使用 Maxwell 或 Canal,然后由另一个程序计算出之后写入 clickhouse
2: 在程序中埋点,然后再写入 rmq 或者 kafaka,再由另一个程序计算写入 clickhouse

但是现在用的数据库是 pgsql,所以 1 用不了,
如果用 pgsql 自带的 Listen/Notify 性能怎么样? 或者有其他什么好的解决方案?

在程序中埋点太累了,基本不考虑;😂

写入

clickhouse

pgsql

程序

2 replies • 2021-06-02 10:28:16 +08:00

taowen

Jun 2, 2021

https://medium.com/hepsiburadatech/postgresql-db-change-data-capture-cdc-using-debezium-f1a933174fd8 PostgreSql Db Change Data Capture (CDC) Using Debezium

xuanbg

Jun 2, 2021

分时段逐级汇总数据