准备源数据文件

首先生成源数据文件,并在数据管理中将它注册为增量文件适配器。然后设置用于指定源数据文件的数据规则。从在数据规则中指定的文件运行数据加载。将初始源数据文件与后续文件进行比较;最后运行的文件将成为对后续加载进行比较的基础。增量文件适配器仅加载差异,这会导致数据加载更快。

提示:

如果提供预排序的源文件,则会体验更佳的性能。

关于源数据文件:

  • 源数据文件必须是带分隔符的数据文件。数据字段是文件中的最后一列。
  • 支持的分隔符:逗号、竖线、叹号、分号、冒号、制表符和波形符。
  • 使用的数据文件必须包含一行标题,用于列出要加载的维。例如:Entity,Employee,Job,Project,Version,Account,Property,Data

  • 可以加载数字数据和非数字数据。

  • 两个文件之间任何已删除的记录会被忽略。必须手动处理已删除的记录。

  • 如果缺少文件(或您将最后一个 ID 更改为不存在的运行),加载完成时会出现错误。

  • 对文件进行预排序会减少处理时间。

  • 增量加载仅支持单期间数据加载。不支持多期间加载。

  • 增量加载不支持向下钻取,因为增量文件是以“替换”模式加载的,仅最后一个版本的文件比较会出现在临时表中。解决方法:可以使用完整数据加载方法将同一数据文件加载到另一个位置。在这种情况下,仅应导入数据,而不应将其导出到目标应用程序。

  • 存档源数据文件的副本以供将来比较。仅保留最后 5 个版本。文件最长保留 60 天。如果超过 60 天未执行任何增量加载,则将最后一个进程 ID 设置为 0 并执行加载。

可以多次使用增量文件适配器来加载数据。