增量数据采集

Question

老师好，datax可以将存量数据导入数据仓库，增量数据一般怎么处理？

Answer 1

叁金 2020-03-19 15:27:19

你好，对于datax增量数据，我们可以引入变量的概念。 比如我们的增量键是时间或者id，在我们的sql当中 id和时间就是变量，我们可以通过命令输入参数的方式替换变量达到增量导入的目的。在视频中也有进行演示。

• 提问者 慕婉清3415166 #1

  谢谢解答！再问一下，增量数据如果要实时获取有什么好的方案吗