在数据流中应用增量处理

在数据流中应用增量处理,以便仅加载数据库中的新记录或更新的记录。

开始之前,先创建一个与受支持数据库的连接,如 Oracle、Oracle Autonomous Data Warehouse、Apache Hive、Hortonworks Hive 或 Map R Hive。
  1. 创建或打开要应用增量处理的数据流。
  2. 数据流编辑器中,选择保存数据步骤以显示步骤编辑器窗格。
  3. 数据集字段中,指定输入数据集(在添加数据步骤中指定的数据集)的名称。
  4. 将数据保存到选项中,选择数据库连接
  5. 单击选择连接,然后选择一个与受支持的目标数据库的连接。
  6. 数据字段中,指定要写入的目标表的名称。
  7. 运行时选项中,选择将新数据添加到现有数据
  8. 单击保存
    现在,您即可将数据流调度为定期加载新数据。