# 重要功能优化
* 优化dbus打包,添加deployer打包工程;
* 优化dbus部署,所有配置统一在conf/config.properties中配置;
* 全量部分代码重构,优化mysql拉取逻辑,防止出现oom导致worker自动重启导致任务拉取失败;
* 新增sinker模块,实现增量数据落hdfs;
# 功能新增
* 新增全量断点续传功能,针对分片数目较多的任务,可以续传未完成的分片任务;
* 自动部署ogg、canal:
新增自动部署canal,自动添加ogg目标端replicat进程功能;
新增ogg、canal自动部署、重新部署、自动漂移功能;
新增集群服务器canal、ogg部署详情集中管理功能;
* 新增批量重启拓扑功能,方便批量升级dbus mysql-extractor,dispatcher-appender、splitter-puller;
* 新增数据线一键检测功能,包括拓扑、ogg、canal、主备延时状态自动获取,此功能目前只提供给心跳程序使用;
* 重新设计优化,拓扑停止、状态获取,不再依赖stormUI;
* 新增更新表结构功能,用于加表后version为null,源端和dbus表结构不一致时自动更新表结构;
Signed-off-by: gaoxiancan <[email protected]>