증분 파일 어댑터를 사용하여 데이터 로드

증분 파일 어댑터 기능을 사용하면 소스 데이터 파일을 소스 데이터 파일의 이전 버전과 비교하고 새 레코드 또는 변경된 레코드를 확인한 다음 해당 데이터 세트만 로드할 수 있습니다. 비교하기 전에 초기 소스 데이터 파일을 정렬하거나 성능 향상을 위해 사전 정렬된 파일을 제공할 수 있습니다.

이 기능을 사용하기 위해 초기 소스 데이터 파일을 증분 파일 어댑터로 등록합니다. 초기 소스 데이터 파일을 템플리트로 사용합니다. 실제 데이터 로드는 초기 소스 데이터 파일과 후속 파일 간에 파일 비교를 실행하는 통합에 지정된 파일에서 실행합니다. 그 후로 한 번, 두 번 또는 여러 번 로드할 수 있습니다. 마지막 실행 파일은 후속 로드를 평가할 때 기준으로 사용됩니다. 어댑터에서는 차이점만 로드하므로 파일 임포트 중에 로드 속도가 빨라집니다. 나머지 데이터 임포트 프로세스는 파일의 표준 데이터 로드에서와 동일하게 유지됩니다.

고려사항:

  • 소스 데이터 파일은 구분된 데이터 파일이어야 합니다.

  • 사용된 데이터 파일에는 구분된 열을 설명하는 한 줄의 머리글이 포함되어야 합니다.

  • 숫자와 숫자가 아닌 데이터를 모두 통합할 수 있습니다.

  • 두 파일 간에 삭제된 레코드는 무시됩니다. 이 경우 삭제된 레코드를 수동으로 처리해야 합니다.

  • 파일이 누락되었거나 마지막 ID를 존재하지 않는 실행으로 변경하는 경우 오류가 발생하고 로드가 완료됩니다.

  • 정렬 옵션에 따라 이 기능을 사용하는 성능 레벨이 결정됩니다. 정렬하면 처리 시간을 늘어납니다. 파일을 사전에 정렬하면 프로세스가 빨라집니다.

  • 증분 로드에서는 단일 기간 데이터 로드만 지원됩니다. 다중 기간 로드는 지원되지 않습니다.

  • 증분 파일은 바꾸기 모드에서 로드되고 최종 버전의 파일 비교만 스테이징 테이블에 있으므로 증분 로드에 드릴 다운은 지원되지 않습니다.

    임시해결책으로 전체 데이터 로드 메소드를 사용하여 동일한 데이터 파일을 다른 위치에 로드할 수 있습니다. 이 경우 데이터를 임포트하기만 하고 타겟 애플리케이션에 익스포트하지 않아야 합니다.

  • 소스 데이터 파일의 사본은 나중에 비교하기 위해 아카이브됩니다. 마지막 5개 버전만 유지됩니다. 파일은 최대 60일 동안 보존됩니다. 60일이 넘게 증분 로드를 수행하지 않으면 마지막 프로세스 ID를 0으로 설정하고 로드를 수행합니다.