Sobre pipelines

Acelere suas soluções de replicação de dados com Pipelines da OCI GoldenGate.

Os pipelines do OCI GoldenGate permitem configurar fluxos de replicação de dados em tempo real que oferecem suporte a casos de uso de missão crítica, como análises, relatórios operacionais e integrações de nuvem híbrida. Você pode criar um pipeline para transmitir dados diretamente de bancos de dados operacionais para ambientes analíticos sem processos tradicionais de extração, transformação e carregamento (ETL). Por exemplo, você pode configurar um pipeline para replicar diretamente dados do Autonomous AI Transaction Processing para o Autonomous AI Lakehouse com configuração mínima.

Observação:

Como os pipelines são alimentados por implantações GoldenGate, você pode experimentar um período de indisponibilidade em momentos em que ocorre um upgrade de implantação.

Sobre pipelines ZeroETL

ZeroETL é um padrão de design ETL (Extract, Transform, and Load) para movimentação contínua de dados orientada a metadados. ZeroETL Os pipelines de espelho transmitem alterações no banco de dados com reconhecimento transacional e as aplicam diretamente a um banco de dados de destino.

Os benefícios de usar pipelines de espelho ZeroETL incluem:

  • Menos pipelines para criar e manter: Substitua processos ETL codificados manualmente e programações frágeis por pipelines gerenciados com a tecnologia OCI GoldenGate.
  • Entrega mais rápida de análises e aplicações: espelhos quase em tempo real mantêm as metas sincronizadas para painéis de controle, recursos de IA/ML e microsserviços.
  • Melhor qualidade e consistência de dados: A replicação transacionalmente consciente reduz o reprocessamento de derivação e downstream.
  • Menor risco operacional: A orquestração, o monitoramento e o tratamento de erros gerenciados reduzem o trabalho de plantão.
  • Padrões, segurança e governança: conexões centralizadas, gerenciamento de credenciais e auditabilidade se alinham aos controles corporativos.

Exemplos que você pode usar pipelines de Espelho ZeroETL para incluir:

  • Análise em tempo real e business intelligence: Espelhe os dados operacionais em bancos de dados de análise, como o Autonomous AI Lakehouse, para novos painéis sem ETL noturno.
  • Armazenamentos de recursos de Inteligência Artificial (IA)/Machine Learning (ML) e Geração Aumentada de Recuperação (RAG): Mantenha recursos sincronizados entre Autonomous AI Databases ou Oracle AI Databases para potencializar a inferência de baixa latência.
  • Tela de dados de aplicações multicloud: mantenha os dados consistentes entre regiões e nuvens para oferecer suporte a aplicações distribuídas e padrões regionais de acesso a dados.
  • Modernização e migração: Crie um destino sincronizado durante a migração para reduzir o risco de transferência e o tempo de inatividade.

Crie recursos de pipeline para começar.

Conceitos de pipeline

Os conceitos a seguir são essenciais para trabalhar com pipelines:

  • Pipeline: um componente predefinido que permite a movimentação de dados em tempo real e com latência mínima de um banco de dados operacional de origem para um lakehouse de destino ou plataforma de análise sem a necessidade de etapas ETL tradicionais.
  • Tipo de pipeline: Um caso de uso comum de replicação de dados.
  • Capturar: Um processo executado na conexão de origem e que extrai ou captura dados. Também conhecido como processo Extract.
  • Aplicar: Um processo que entrega dados a um banco de dados ou tecnologia de destino, também conhecido como processo de Replicat.

Tipos de conexão suportados para Pipelines

Os Pipelines do OCI GoldenGate atualmente suportam os seguintes Bancos de Dados Oracle:

Você também pode criar uma conexão no workflow Criar pipeline.