Указание нового индикатора данных для источника данных

Выберите столбец данных, чтобы использовать его как индикатор новых данных в источнике. Этот индикатор определяет, когда с момента последнего выполнения потока данных были обнаружены новые данные. Например, можно выбрать столбец меток времени.

Указав индикатор новых данных, можно выполнять инкрементную обработку при загрузке данных. Иначе говоря, каждый раз при загрузке данных с помощью потока данных будут обрабатываться только новые данные, добавленные после прошлого запуска.
Перед началом работы создайте подключение к одной из поддерживаемых баз данных, например Oracle, Oracle Autonomous Data Warehouse, Apache Hive, Hortonworks Hive или Map R Hive.
  1. На главной странице нажмите Навигатор Значок навигатора, используемый для отображения навигатора и выберите Данные
  2. Наведите курсор на набор данных, нажмите Действия и выберите Открыть.
  3. На диаграмме объединений дважды щелкните таблицу с инкрементным идентификатором, который требуется использовать.
  4. Нажмите Редактировать определение.
  5. Если панель доступа к данным не отображается, на правом краю окна в центре найдите параметр Развернуть, затем нажмите Развернуть.

    Теперь можно просмотреть параметры кэширования и поле Индикатор новых данных потока в разделе Дополнительно.
    Описание GUID-B895C974-E71A-43DE-BC01-CB0698F8BDF2-default.png ниже
    .png

  6. В поле Индикатор новых данных потока выберите столбец для обнаружения добавления новых данных.
  7. Нажмите OK.