Documentação do Oracle Cloud Infrastructure

Criando um Pipeline

Criar um pipeline em um projeto ou pasta no Data Integration. Pipeline é um recurso de design-time para conectar tarefas e atividades em uma ou mais sequências ou em paralelo do início ao fim para orquestrar o processamento de dados.

O Data Integration inclui um projeto padrão para você começar. Para criar outros projetos ou pastas, consulte Projetos e Pastas.

Você pode adicionar tarefas publicadas e tarefas de design-time em um pipeline. As tarefas publicadas podem ser de qualquer aplicativo no espaço de trabalho atual ou de outro espaço de trabalho no mesmo compartimento ou em outro compartimento.

Certifique-se de revisar Informações e Considerações de Suporte ao Usar Pipelines antes de criar ou editar um pipeline. Por exemplo, preste atenção ao nível de profundidade aninhado e ao limite de tarefas por nível.

    1. Na seção Pipelines do projeto ou da pasta em que você deseja criar um pipeline, selecione Criar Pipeline. Se precisar de ajuda para localizar a seção Pipelines em uma página de detalhes de projeto ou pasta, consulte Listando Pipelines.

      O Data Integration exibe o designer em uma guia. Os painéis Operadores e Propriedades estão abertos, e um operador inicial e um operador final são colocados na tela para você. Para obter informações sobre esses operadores, consulte Operador Inicial e Operador Final.

    2. Na guia Detalhes no painel Propriedades, digite um nome e uma descrição opcional para o pipeline.

      O identificador é um valor gerado pelo sistema com base no nome. Você pode alterar o valor, mas depois de criar e salvar o pipeline, não será possível atualizar o identificador.

    3. (Opcional) Para o campo Projeto ou pasta, clique em Selecionar e selecione outro projeto ou pasta na qual salvar o pipeline.
    4. Arraste operadores de pipeline do painel Operadores para a tela para projetar o pipeline.

      Para duplicar uma tarefa ou um operador de expressão, clique com o botão direito do mouse no ícone do operador e selecione Duplicar. Em seguida, selecione o operador duplicado e renomeie o identificador no painel Propriedades.

      Considere as seguintes restrições ao usar a ação duplicada:

      • A ação duplicada não está disponível para os operadores de início, fim e mesclagem.

      • Se o operador original estiver conectado a outros operadores, as conexões não serão copiadas para o operador duplicado.

      • Se o operador original tiver configurado saídas do operador anterior, as configurações de saída não serão copiadas para o operador duplicado.

    5. Para salvar o pipeline pela primeira vez, selecione um dos seguintes botões:
      • Criar: Cria e salva o pipeline. Você pode continuar criando e editando o pipeline no designer.
      • Criar e fechar: Cria e salva o pipeline, fecha o designer e retorna você à lista Pipelines na página de detalhes do projeto ou da pasta.

      Salve periodicamente enquanto trabalha no designer selecionando um dos seguintes botões:

      • Salvar: Confirma alterações desde o último salvamento. Você pode continuar editando depois de salvar.
      • Salvar e fechar: Confirma alterações, fecha o designer e retorna você à lista Pipelines na página de detalhes do projeto ou da pasta.
      • Salvar como: Confirma alterações (desde o último salvamento) e salva em uma cópia em vez de substituir o pipeline atual. Você pode fornecer um nome para a cópia e selecionar outro projeto ou pasta para a cópia ou salvar a cópia no mesmo projeto ou pasta do pipeline atual.
    6. Na guia Configuração no painel Propriedades, conclua a configuração de um operador de tarefa e a regra no operador final.
    7. Na guia Parâmetros no painel Propriedades do pipeline, exiba e edite os parâmetros do pipeline.
    8. Valide o pipeline para verificar se há advertências ou erros que possam causar problemas durante o runtime. Na barra de ferramentas do designer, selecione Validar.

      O Data Integration exibe o painel Validação global. Se forem encontrados avisos ou erros, selecione um nome de identificador na lista de problemas para colocar o operador com esse aviso ou erro em foco na tela.

    9. Quando terminar de trabalhar no pipeline, selecione Criar e fechar ou Salvar e fechar.
    Para executar o pipeline, crie uma tarefa de pipeline. Consulte Criando uma Tarefa de Pipeline.

  • Use o comando oci data-integration pipeline create e os parâmetros necessários para criar um pipeline:

    oci data-integration pipeline create [OPTIONS]

    Para obter uma lista completa de flags e opções de variáveis para comandos da CLI, consulte a Referência de Linha de Comando.

  • Execute a operação CreatePipeline para criar um pipeline.