小数据量的很nice,大数据量同步表不需要这么大,假设有一个销售单的表中有5年的数据,同步表中只需要一年的数据怎么处理
赞 0 2024-05-23 18:21
数据管道只能原样同步数据,您可以先把一年的数据取出路口后再使用数据管道实现后续的同步;或者试下数据比对功能呢:数据比对功能说明 https://help.fanruan.com/finedatalink/doc-view-456.html
赞 0 2024-06-12 16:42
假设现在需求很明确,就是要求实时数据,且原数据量大,就是需要一个小数据量的实时表,有没有比较好的解决方案? 先抽取一年的数据量,再使用数据管道,也会跑全量的
赞 0 2024-06-13 09:36
你这种情况: 方案一:源端数据那边做控制,源端只保留一年的数据,然后做实时同步 方案二:将所有数据同步到目标表B中,使用的时候只使用目标表B的一年数据即可 目前不支持:源端包含多年数据,目标端只有一年数据的实时同步的,实时同步暂不支持计算
赞 0 2024-06-25 15:58
来源表没有主键 ,目标表设置的逻辑主键有重复值存在,这个时候来源表数据有增加时,目标表就会出错,没有同步最新数据,且会覆盖掉逻辑键的内容。
赞 0 2023-06-14 21:47
写入方式选择追加写入(只能新增数据,不能更新、删除数据) 若想实现更新数据,逻辑主键不能重复的
赞 0 2024-06-12 16:40
数据管道任务配置成功后,读写统计页面有显示正确读取和输出的行数,但是我的目标数据表中却没有数据,请问是什么原因呢?
赞 0 2023-04-23 15:01
您的读写数据库类型是什么呢
赞 0 2023-06-02 15:28
超过6个任务就不能新增了;不知道啥原因
赞 0 2023-03-14 09:15
您好,正常来说是支持的 可以接入技术支持获取帮助~
赞 0 2023-03-28 09:44
10 评论
小数据量的很nice,大数据量同步表不需要这么大,假设有一个销售单的表中有5年的数据,同步表中只需要一年的数据怎么处理
赞 0 2024-05-23 18:21
数据管道只能原样同步数据,您可以先把一年的数据取出路口后再使用数据管道实现后续的同步;或者试下数据比对功能呢:数据比对功能说明 https://help.fanruan.com/finedatalink/doc-view-456.html
赞 0 2024-06-12 16:42
假设现在需求很明确,就是要求实时数据,且原数据量大,就是需要一个小数据量的实时表,有没有比较好的解决方案?
先抽取一年的数据量,再使用数据管道,也会跑全量的
赞 0 2024-06-13 09:36
你这种情况:
方案一:源端数据那边做控制,源端只保留一年的数据,然后做实时同步
方案二:将所有数据同步到目标表B中,使用的时候只使用目标表B的一年数据即可
目前不支持:源端包含多年数据,目标端只有一年数据的实时同步的,实时同步暂不支持计算
赞 0 2024-06-25 15:58
来源表没有主键 ,目标表设置的逻辑主键有重复值存在,这个时候来源表数据有增加时,目标表就会出错,没有同步最新数据,且会覆盖掉逻辑键的内容。
赞 0 2023-06-14 21:47
写入方式选择追加写入(只能新增数据,不能更新、删除数据)
若想实现更新数据,逻辑主键不能重复的
赞 0 2024-06-12 16:40
数据管道任务配置成功后,读写统计页面有显示正确读取和输出的行数,但是我的目标数据表中却没有数据,请问是什么原因呢?
赞 0 2023-04-23 15:01
您的读写数据库类型是什么呢
赞 0 2023-06-02 15:28
超过6个任务就不能新增了;不知道啥原因
赞 0 2023-03-14 09:15
您好,正常来说是支持的
可以接入技术支持获取帮助~
赞 0 2023-03-28 09:44