在这里每天分享一些新东西

spark-binlog – Spark导入工具

spark-binlog是一款可以直接在spark中消费MySQL binlog的软件包,目前还支持Hbase WAL日志的解析。配合我另外一个项目 delta-plus可以实现实时数据同步到数据湖中。欢迎大家参与进来,我的目标是慢慢把各种数据库都支持上(比如TiDB,Oracle)。

为此项目打分吧
[总分: 0 平均分: 0]

发表评论

您的电子邮箱地址不会被公开。 必填项已用*标注

zh_CN简体中文