1.1 问题描述

用户在定时任务进行数据同步时，如果源数据库同时有增删改变化时，可以使用数据比对，但是如果数据量很大，想要更好的提高同步效率，就可以使用本文的方案进行数据同步。

1.2 实现思路

1.2.1 来源表有时间戳

1）同步删除数据：通过比对主键，删除目标表中来源表物理删除的数据。

2）使用时间戳同步新增和修改的数据：

获取上次同步的时候，来源库的最大时间戳，并设置为参数 cur_timestamp。

获取这次同步的时候，来源库的最大时间戳，并设置为参数 tmp_timestamp。

获取来源表相对目标表的增量数据，即 order_timestamp（来源表业务时间戳）>cur_timestamp 的数据，并将增量数据同步到目标表。

3）更新时间表同步时间戳和执行记录。

1.2.2 来源表无时间戳

2.1 前提条件

创建执行记录数据表，便于获取每次同步的时间戳，如下图所示：

注：两个时间字段初始值可以设置为一个比较早的时间，早于业务数据时间戳，以便初次同步全量数据。