1 Visão Geral do Oracle AI Data Platform
Este capítulo fornece informações e procedimentos para novos usuários que estão se familiarizando com o Oracle AI Data Platform.
Para que o Oracle AI Data Platform é usado?
O Oracle AI Data Platform fornece um ambiente integrado para criar, orquestrar e operacionalizar dados e fluxos de trabalho de IA.
- Streamline Data Discovery and Governance: a AI Data Platform fornece um repositório de metadados centralizado (Catálogo Mestre) que aprimora a capacidade de pesquisa e a governança de dados estruturados e não estruturados.
- Habilitar Colaboração Segura de Dados: por meio do controle de acesso baseado em RBAC, a Plataforma de Dados de IA permite que diferentes equipes trabalhem em conjuntos de dados compartilhados, mantendo políticas de segurança rigorosas.
- Acelere a Preparação e o Processamento de Dados: com notebooks integrados e orquestração de workflow, os usuários podem limpar, transformar e enriquecer dados com eficiência.
- Suporte a Análise Avançada, IA e ML: Os usuários podem criar e implementar agentes de IA personalizáveis para dar suporte ao seu trabalho com dados catalogados. A Plataforma de Dados de IA também se integra ao Apache Spark, permitindo que cientistas e analistas de dados executem cálculos complexos e treinamentos de modelos diretamente em seus dados.
- Garantir Integração Perfeita entre Origens de Dados: A AI Data Platform oferece suporte a catálogos externos do Autonomous Database (ADB), do Object Storage (OS) e de origens de dados de terceiros, permitindo que OS usuários consultem e analisem dados sem duplicação.
Integração Gerenciada com Código-Fonte Aberto
O Oracle AI Data Platform aproveita e estende tecnologias de código-fonte aberto para fornecer uma experiência avançada e gerenciada.
- Apache Spark: A camada de computação da AI Data Platform é alimentada pelo Spark, permitindo processamento de dados distribuído e escalável.
- Suporte ao Delta Lake: A AI Data Platform aproveita o Delta Lake para melhorar a confiabilidade dos dados, as transações ACID e a evolução do esquema.
- Compatibilidade com Iceberg e Hudi via Delta Uniform: por meio do Delta Uniform, a Plataforma de dados de IA estende o suporte para Apache Iceberg e Apache Hudi, permitindo a interoperabilidade em diferentes formatos de armazenamento. Isso garante que os usuários possam adotar uma estratégia de formato de tabela unificada, mantendo a execução eficiente de consultas e a governança de dados.
- Integração JDBC para Ferramentas de BI: A AI Data Platform fornece drivers JDBC, permitindo conectividade perfeita com ferramentas de BI externas como Oracle Analytics Cloud (OAC) e plataformas de visualização de terceiros.
Personas para Usuários do Oracle AI Data Platform
A Oracle AI Data Platform atende a uma variedade de usuários em diferentes funções dentro de uma organização, cada uma com necessidades e requisitos exclusivos.
- Engenheiros de Dados - Os engenheiros de dados trabalham com pipelines de dados em larga escala, transformando dados brutos em formatos utilizáveis para análise. Eles contam com os recursos avançados da AI Data Platform para projetar e gerenciar fluxos de trabalho de dados, ingerir dados de várias fontes e garantir a qualidade dos dados. Eles estão altamente focados em automatizar processos, otimizar recursos de computação e integrar diferentes sistemas de dados perfeitamente.
- Engenheiros de IA - Os engenheiros de IA criam fluxos de ponta a ponta para agentes com tecnologia de IA. Eles criam agentes que podem fazer interface com ferramentas suportadas, como RAG, SQL e prompts para ajudar os usuários a simplificar o desenvolvimento e o gerenciamento de dados.
- Analistas de Dados - Os analistas de dados usam a Plataforma de Dados de IA para descobrir, analisar e gerar insights a partir de dados. Eles exigem uma interface intuitiva e ferramentas para consultar e analisar grandes conjuntos de dados. A AI Data Platform os capacita com notebooks interativos e integração perfeita com ferramentas de business intelligence (BI), ajudando a transformar dados brutos em insights acionáveis para tomadores de decisão.
- Cientistas de Dados - Os cientistas de dados aproveitam os recursos de computação escaláveis da Plataforma de Dados de IA para tarefas de machine learning e análise avançada. Eles precisam de acesso a diversos conjuntos de dados, poderosas ferramentas de processamento e a capacidade de executar modelos complexos. Os notebooks com tecnologia Spark, a integração de IA/ML e o suporte a bibliotecas de código aberto permitem que os cientistas de dados criem, testem e implantem modelos na plataforma.
- Administradores de Dados - Esses usuários garantem que todos os dados sejam tratados em conformidade com as regulamentações do setor e as políticas organizacionais. Eles se concentram em manter a privacidade dos dados, auditar o acesso e monitorar o uso de dados em toda a organização. A AI Data Platform ajuda a gerenciar metadados, impor controles de acesso baseados em atribuições (RBAC) e garantir a governança adequada por meio de catálogos, rastreamento de linhagem e políticas de segurança.
Casos de Uso Comuns do Oracle AI Data Platform
A Oracle AI Data Platform atende a uma variedade de casos de uso em setores e funções de negócios.
Arquitetura Medallion
- Implemente uma arquitetura medalhão com camadas de bronze, prata e ouro.
- Use o Delta Uniform e o Iceberg para armazenamento eficiente de dados e otimização de consultas.
- Permita acesso de cópia zero a fontes de dados externas para análises contínuas.
ETL e Engenharia de Dados
- Use workflows e notebooks baseados no Spark para processar, transformar e enriquecer dados brutos.
- Automatize pipelines de dados com orquestração de workflow low-code/no-code.
- Lidar com processamento em lote em larga escala e ingestão de dados em tempo real.
Machine Learning, IA e Ciência de Dados
- Treine e implante modelos de machine learning usando notebooks com tecnologia Spark.
- Permita a engenharia de recursos e a transformação de dados em larga escala.
- Forneça ambientes de execução gerenciados para cargas de trabalho Python e PySpark.
- Crie agentes de IA de conversação para ajudar na recuperação e desenvolvimento de dados.
Catálogo e Governança de Dados Empresariais, Delta Sharing
- Gerenciamento centralizado de metadados para dados estruturados e não estruturados.
- Controle de acesso baseado em função (RBAC) para acesso e colaboração seguros de dados.
- Integração com catálogos externos, incluindo Oracle Autonomous AI Database e OCI Object Storage.
- A Plataforma de Dados de IA oferece suporte ao Compartilhamento Delta, permitindo o compartilhamento de dados seguro, em tempo real e governado entre os limites organizacionais.
Análises, Business Intelligence e Relatórios
- Conecte OCI, Oracle Analytics Cloud (OAC) e ferramentas de BI de terceiros via JDBC como Tableau e Power BI.
Integração de Dados Multinuvem e Híbrida
- Ative a execução de consulta federada em vários serviços do OCI.
- Integre com bancos de dados e armazenamento em nuvem de terceiros para análise híbrida.
- Mantenha a soberania e a conformidade dos dados em vários ambientes.