Acerca dos Fluxos de Dados

Os fluxos de dados permitem-lhe organizar e integrar os seus dados para produzir conjuntos de dados examinados que os seus utilizadores podem visualizar.

Utilize fluxos de dados para manipular os seus dados visualmente sem necessitar de capacidades de codificação manual.

Por exemplo, poderá utilizar um fluxo de dados para:

  • Criar um conjunto de dados.
  • Combinar dados de diferentes origens.
  • Agregar dados.
  • Treinar modelos de aprendizagem automática ou aplicar um modelo de aprendizagem automática de previsão aos seus dados.
  • Efetue a deteção de objetos, a classificação de imagens ou a deteção de texto utilizando a inteligência artificial através do serviço OCI Vision.

Pode criar fluxos de dados no painel de design de fluxos de dados.
Segue-se a descrição de GUID-2B831D4B-0478-4EAC-917D-EA910D9FFFE3-default.png
.png

Para criar um fluxo de dados, acrescente passos. Cada passo executa uma função específica, por exemplo, acrescentar dados, unir tabelas, fundir colunas ou transformar dados. Utilize o editor de fluxos de dados para acrescentar e configurar os seus passos. Cada passo é validado quando o acrescenta ou altera. Quando tiver configurado o seu fluxo de dados, execute-o para criar ou atualizar um conjunto de dados.

Quando a acrescentar as suas próprias colunas ou transformar dados, pode utilizar uma vasta gama de operadores de SQL (por exemplo, BETWEEN, LIKE, IN), expressões condicionais (por exemplo, CASE) e funções (por exemplo, Avg, Median, Percentile).

Atualizar Conjuntos de Dados Gerados por Fluxos de Dados

Pode reexecutar os fluxos de dados para manter os seus conjuntos de dados atualizados.

Nota:

Quando reexecuta um fluxo de dados, quaisquer transformações aplicadas diretamente ao conjunto de dados de saída fora do fluxo de dados são perdidas. O conjunto de dados é recriado de raiz.

Limites do Fluxo de Dados

Se estiver a processar grandes quantidades de dados, tenha em consideração que existem limites do fluxo de dados. Consulte Limites do Fluxo de Dados.

Suporte da Base de Dados para Fluxos de Dados

Com fluxos de dados, pode examinar dados de conjuntos de dados e áreas de atividade.

Pode executar fluxos de dados individualmente ou numa sequência. Pode incluir várias origens de dados num fluxo de dados e especificar o modo de junção das mesmas.

Utilize o passo Acrescentar Dados para acrescentar dados a um fluxo de dados e utilizar o passo Gravar Dados para gravar dados de saída de dados de um fluxo de dados.

Pode gravar os dados de saída de um fluxo de dados num conjunto de dados ou num dos tipos de base de dados suportados. Se gravar os dados numa base de dados, pode transformar a origem de dados substituindo-a por dados do fluxo de dados. As tabelas da origem de dados e do fluxo de dados devem estar na mesma base de dados e ter o mesmo nome. Antes de começar, crie uma ligação a um dos tipos de base de dados suportados.

Nota:

Pode acrescentar dados de bases de dados remotas ligadas ao Data Gateway. No entanto, não pode gravar os dados novamente nas bases de dados remotas ligadas ao Data Gateway.

Saída de Dados

Pode gravar os dados de saída de dados dos fluxos de dados a estes tipos de base de dados:
  • Oracle Autonomous AI Lakehouse
  • Oracle Autonomous AI Transaction Processing
  • Base de Dados Oracle
  • Apache Hive
  • Hortonworks Hive
  • MapR Hive
  • Spark

Para obter informações sobre a versão da base de dados, consulte Origens de Dados Suportadas.

Entrada de Dados

Nos fluxos de dados, pode processar dados de conjuntos de dados e áreas de atividade. Não pode extrair dados diretamente das bases de dados - primeiro tem de criar um conjunto de dados a partir das tabelas da base de dados.

Trabalhar no Designer de Fluxos de Dados

O designer de fluxos de dados permite-lhe examinar e transformar os seus dados num ambiente de design gráfico.

Trabalhar no designer de fluxos de dados:

Utilize o designer de fluxos de dados para organizar e configurar os passos do fluxo de dados que transformam os seus dados.



Utilize estas funcionalidades no designer de fluxos de dados.

Funcionalidade Ícone Descrição
Disposição compacta Ícone de disposição compacta Agrupa os passos numa área de visualização mais pequena para reduzir a deslocação.
Disposição expandida Ícone de disposição expandida Alinha os passos da origem de dados de entrada à esquerda para melhorar a legibilidade.
Junção ou união incompleta

Ícone de junção ou união completa

Indica uma origem de dados que não tem junção ou união. Coloque o cursor sobre o ícone de ligação azul Ícone de junção ou união completa para ver um destino de junção sugerido (linha ponteada) e clique novamente para concluir a junção ou união (linha sólida).

Para retirar uma ligação, clique com o botão direito do rato no passo Junção Ícone do passo Junção ou no passo União Ícone do passo União e, em seguida, selecione Apagar.

Melhoramentos de zoom Ícone de zoom Aproxima e afasta.