binlog_loader_ubox同步很慢

[pan20060802]

我从中转库同步到 gp,发现延迟越来越大,请问如何提高这方面性能?

库里面的bin_data 表读取表id没有问题,binlog_miner抓取过去了.

[pan20060802]

binlog_loader 这个程序很慢

[pan20060802]

发现是 我们的服务器上 中转库的问题,把 中转gp 上 28g(源mysql读写量还比较大)的表删除后,用默认的 load_batch = 10
load_batch_gap = 10 就同步很正常.负载也不会高.
但 由于同步量很大,难道要每隔一段时间 就去手动清理下 中转gp上的表?

[wjzeng]

增加增量数据同步吞吐的方法就是提高每一批处理的数据量，
然后减少频率，一次处理更多的数据。
如果表很多，则建议降低频率。