在数据流中应用增量处理,以便仅加载数据库中的新记录或更新的记录。
开始之前,先创建一个与受支持数据库的连接,如 Oracle、Oracle Autonomous Data Warehouse、Apache Hive、Hortonworks Hive 或 Map R Hive。
- 创建或打开要应用增量处理的数据流。
- 在数据流编辑器中,选择保存数据步骤以显示步骤编辑器窗格。
- 在数据集字段中,指定输入数据集(在添加数据步骤中指定的数据集)的名称。
- 在将数据保存到选项中,选择数据库连接。
- 单击选择连接,然后选择一个与受支持的目标数据库的连接。
- 在数据字段中,指定要写入的目标表的名称。
- 在运行时选项中,选择将新数据添加到现有数据。
- 单击保存。
现在,您即可将数据流调度为定期加载新数据。