Tags: supercena/DBus
Tags
dbus v0.6.0版初次发布: # 重要功能优化 * 优化dbus打包,添加deployer打包工程; * 优化dbus部署,所有配置统一在conf/config.properties中配置; * 全量部分代码重构,优化mysql拉取逻辑,防止出现oom导致worker自动重启导致任务拉取失败; * 新增sinker模块,实现增量数据落hdfs; # 功能新增 * 新增全量断点续传功能,针对分片数目较多的任务,可以续传未完成的分片任务; * 自动部署ogg、canal: 新增自动部署canal,自动添加ogg目标端replicat进程功能; 新增ogg、canal自动部署、重新部署、自动漂移功能; 新增集群服务器canal、ogg部署详情集中管理功能; * 新增批量重启拓扑功能,方便批量升级dbus mysql-extractor,dispatcher-appender、splitter-puller; * 新增数据线一键检测功能,包括拓扑、ogg、canal、主备延时状态自动获取,此功能目前只提供给心跳程序使用; * 重新设计优化,拓扑停止、状态获取,不再依赖stormUI; * 新增更新表结构功能,用于加表后version为null,源端和dbus表结构不一致时自动更新表结构; Signed-off-by: gaoxiancan <[email protected]>
Merge branch 'master' of https://github.com/BriData/DBus # Conflicts: # img/6initial_load_1.png # img/6initial_load_2.png # img/6initial_load_3.png