Especificar um Novo Indicador de Dados para uma Origem de Dados

Selecione a coluna de dados a ser usada como o indicador de novos dados na origem de dados. Esse indicador determina quando novos dados são detectados desde a última vez em que o fluxo de dados foi executado. Por exemplo, você pode selecionar uma coluna de timestamp.

A opção Especificando um Indicador de Novos Dados permite executar um processamento incremental quando você carrega dados. Em outras palavras, cada vez que carrega dados usando um fluxo de dados, você só processa novos dados que foram adicionados desde a última execução.
Antes de começar, crie uma conexão com um dos bancos de dados suportados, por exemplo Oracle, Oracle Autonomous Data Warehouse, Apache Hive, Hortonworks Hive ou Map R Hive.
  1. Na home page, clique em Navegador Ícone do navegador usado para exibir o Navegadore clique em Dados
  2. Passe o cursor do mouse sobre um conjunto de dados, clique em Ações e, em seguida, selecione Abrir.
  3. No Diagrama de Junção, clique duas vezes na tabela que inclui o identificador incremental que você deseja usar.
  4. Clique em Editar Definição.
  5. Se o painel de acesso a dados não for exibido, vá até o centro da borda direita da janela para localizar a opção Expandir; em seguida, clique em Expandir.

    Agora você pode ver as opções de armazenamento no cache e o campo Indicador de Novos Dados do Fluxo sob Avançado.
    Descrição de GUID-B895C974-E71A-43DE-BC01-CB0698F8BDF2-default.png segue
    .png

  6. No campo Indicador de Novos Dados do Fluxo, selecione uma coluna para detectar quando novos dados são adicionados.
  7. Clique em OK.