Antes de Começar a Usar o Serviço Data Flow

Antes de começar a usar o serviço Data Flow, você deve ter:

  • Uma conta no Oracle Cloud Infrastructure. As contas de avaliação podem ser usadas para demonstrar o serviço Data Flow.
  • Uma atribuição de Administrador de Serviço para seus serviços do Oracle Cloud. Quando o serviço é ativado, a Oracle envia as credenciais e o URL ao Administrador da Conta escolhido. O Administrador da Conta cria uma conta para cada usuário que precisa de acesso ao serviço.
  • Um browser suportado, como:
    • Microsoft Internet Explorer 11.x+

    • Mozilla Firefox ESR 38+

    • Google Chrome 42+

  • Um Aplicativo Spark submetido a upload para o serviço Object Storage. Não o forneça em um formato zipado, como .zip ou .gzip.
  • Dados para processamento carregados no Oracle Cloud Infrastructure Object Storage. Os dados podem ser lidos de origens ou nuvens de dados externos. O serviço Data Flow otimiza o desempenho e a segurança para os dados armazenados em um Armazenamento de Objetos do Oracle Cloud Infrastructure.
  • Os tipos de aplicativo suportados são:
    • Java
    • Scala
    • SparkSQL
    • PySpark (somente Python 3)
  • Esta tabela mostra as versões do Spark suportadas pelo serviço Data Flow.
    Versões do Spark Suportadas
    Versão do Spark Hadoop Java Python Scala oci-hdfs oci-java-sdk Documentação do Spark
    Spark 3.5.0 3.3 17 3.11 2.12 3.3.4.1.4.2 3.34 Guia do Spark Release 3.5.0
    Spark 3.2.1 3.3.1 11 3.8.13 2.12.15 3.3.1.0.3.2 2.45 Guia do Spark Release 3.2.1
    Spark 3.0.2 3.2.0 1.8.0_321 3.6.8 2.12.10 3.2.1.3 1.25.2 Guia do Spark Release 3.0.2
    Spark 2.4.4 2.9 1.8_162 3.6.8 2.11.12 2.9.2.6 1.25 Guia do Spark Release 2.4.4
    Esta tabela é apenas para referência e não deve ser abrangente.
Observação

Evite inserir informações confidenciais ao designar descrições, tags ou nomes amigáveis aos seus recursos na nuvem por meio da Console, API ou CLI do Oracle Cloud Infrastructure. Isso se aplica ao criar ou editar um aplicativo no serviço Data Flow.