Gerenciar Armazenamento

Se você estiver usando apenas os logs recentes para suas tarefas da pesquisa e da análise no Oracle Log Analytics, ative a compactação para que você possa otimizar o custo de armazenamento.

1. Abra o menu de navegação e clique em Observabilidade e Gerenciamento. Em Log Analytics, clique em Administração.

2. Os recursos administrativos são listados no painel esquerdo de navegação em Administração. Clique em Armazenamento.

   A página Armazenamento é exibida.

3. Clique em Ativar Arquivamento. Na caixa de diálogo Ativar arquivamento,

   • Informe a contagem dos dias após os quais os dados do log no armazenamento ativo devem ser arquivados no campo Duração de Armazenamento Ativo (Dias).

     A contagem é calculada com base no timestamp dos logs. Por exemplo, se seus logs tiverem o timestamp November 4, 2020 23:43:12 e você tiver especificado a Duração do Armazenamento Ativo como 30, os logs geralmente serão movidos para o armazenamento de arquivos compactados em December 3, 2020.

     Observação
     
     

     Observe que, mesmo que você especifique a Duração do Armazenamento Ativo dos logs para determinar os logs que devem ser movidos para o armazenamento de Arquivos Compactados, a estrutura de índice de logs será baseada nos buckets que são usados para armazenar os logs. Em um cenário típico, um bucket inteiro é movido para o armazenamento de arquivos compactados quando todos os logs nele são mais antigos que o critério especificado.

     Por exemplo, considere que o campo Duração do Armazenamento Ativo esteja definido como 30 dias:

     • Bucket_1 tem logs de idade de 40 a 80 dias: Os dados de log são elegíveis e são movidos para o armazenamento de arquivos compactados.
     • Bucket_2 tem logs de 25 a 40 dias: Embora alguns dados de log sejam elegíveis para arquivamento, eles não serão arquivados até que todos os logs estejam adequados à idade especificada.
     • Bucket_3 tem logs de 0 a 25 dias: Nenhum dos logs é adequado para arquivamento. O bucket inteiro é arquivado quando todos os logs se tornam elegíveis.

     No cenário anterior, depois que os logs de Bucket_1 são arquivados, se mais logs forem coletados com mais de 40 dias, eles geralmente serão anexados a Bucket_2.

   • Por padrão, os dados de log permanecem no armazenamento de arquivamento por tempo indefinido. A caixa de seleção Indefinidamente é ativada ao lado do campo Duração do Armazenamento de Arquivamento (Dias).

     Você pode modificar a duração desativando a caixa de seleção e informando a contagem dos dias após os quais os dados de log no armazenamento de arquivamento devem ser expurgados no campo Duração do Armazenamento de Arquivamento (Dias).

   Clique em Ativar.

4. Se você já tiver ativado o arquivamento e quiser modificar as definições dele, clique em Modificar Definições de Arquivamento. Você pode executar qualquer uma das seguintes tarefas:

   • Você pode alterar o valor da contagem dos dias especificados para arquivamento em Duração do Armazenamento Ativo (Dias).
   • Você pode alterar o valor da contagem dos dias especificados para expurgar os logs do armazenamento de arquivamento em Duração do Armazenamento de Arquivamento (Dias) ou ativar a caixa de seleção Indefinidamente para reter permanentemente os logs no armazenamento de arquivamento.
   • Clique em Desativar Arquivamento para interromper o arquivamento.

   Clique em Salvar Alterações.

Você pode recuperar logs arquivados para exibição e análise. Uma vez recuperados, os dados são contados em relação ao uso de armazenamento ativo até serem liberados de volta para o arquivo compactado.

Você pode recuperar e liberar os mesmos conjuntos de logs várias vezes. Não há dependências entre recalls, mesmo que seus intervalos de tempo ou consultas se sobreponham.

1. Abra o menu de navegação e clique em Observabilidade e Gerenciamento. Em Log Analytics, clique em Administração.

2. Os recursos administrativos são listados no painel esquerdo de navegação em Administração. Clique em Armazenamento.

   A página Armazenamento é exibida.

3. Na página Armazenamento, clique em Recalls de Arquivamento Ativo.

   A guia Recalls de Arquivamento Ativo exibe as solicitações de recall iniciadas anteriormente.

4. Clique em Criar Solicitação de Recuperação. A caixa de diálogo Criar Solicitação de Recuperação é aberta.

5. Especifique a Finalidade da recuperação. Isso pode ajudá-lo a identificar sua solicitação de recall.

6. Se preferir, se você tiver definido o conjunto de logs, poderá especificar um ou mais Conjuntos de Logs para filtrar os dados recuperados. Para especificar vários conjuntos de logs, use a separação por vírgulas.

7. Selecione o intervalo de tempo dos logs que você deseja lembrar, especificando a Hora inicial definida pelo usuário e a Hora final definida pelo usuário.

8. Clique em Estimar Tamanho do Log de Recall. A seção Conjunto de Dados recomendado para análise é aberta. O tamanho dos logs selecionados para recuperação é exibido ao lado do cabeçalho Tamanho máximo dos dados recuperados antes da filtragem.

   Observe que o horário inicial e o horário final são estendidas para alinhamento com a estrutura de índice de logs com base nos buckets. Portanto, quando você exibir a lista de recuperações ativas ou visitar a guia de atividades, poderá obter os horários inicial e final estendidos além da faixa de tempo escolhida.

9. Um intervalo de tempo alternativo é recomendado com base na disponibilidade de dados. Para selecionar o intervalo de tempo especificado anteriormente, em vez do intervalo de tempo recomendado, ative a caixa de seleção Do not use recommended data set for recall

10. Especifique a Consulta para filtrar o conjunto de dados. Exclua a hora e o conjunto de logs da consulta.

    A especificação dos filtros reduz o tamanho real dos dados recuperados. No entanto, o filtro não afeta essa estimativa.

    Observação
    
    

    Somente filtros de pesquisa ou regex são suportados na consulta. Evite adicionar pipes, agregados ou funções estatísticas à consulta.

    Você pode usar qualquer campo de log para filtrar os dados com a consulta, exceto o tempo e o conjunto de logs.

    Alguns exemplos de pesquisas inválidas:

    • Entity = ‘test1’ | search ‘xyz’

      Em vez disso, você pode usar Entity = 'test1' and 'xyz', que é válido. Da mesma forma, mais exemplos válidos incluem 'Entity = 'test1' e 'Log Source' = 'AVDF Alert Linux Syslog' and 'xyz'.

    • Entity = ‘test1’ | stats count

      A consulta acima não tem uma solução alternativa porque tem uma função estatística e um pipe. No entanto, o uso apenas do filtro de entidade é válido Entity = ‘test1’.

11. Clique em Criar Solicitação de Recall para prosseguir com a recuperação dos logs selecionados.

    A atividade de recuperação é listada na guia Chamadas de Arquivamento Ativas. A tabela especifica o status, o intervalo de tempo, o tamanho dos dados e a data e hora da solicitação da atividade de recall, o usuário que iniciou a recall e a finalidade da recall.

    Veja o status da atividade de recuperação. Você pode usar os logs recuperados para exibição e análise após a conclusão da atividade de recuperação.

    Observação
    
    

    Se o status da sua recuperação for PARTIAL_RECALLED, libere e recupere novamente, pois a recuperação atual não inclui dados completos para análise.

    Se o ícone de tamanho de dados de uma coleção for exibido em laranja, novos dados de log adicionais estarão disponíveis para recuperação. Clique no ícone de dados e clique em Recall new data para iniciar a recuperação dos novos dados. A caixa de diálogo Recall new data é aberta. A consulta para filtrar o conjunto de dados e o intervalo de tempo para recuperação de dados são predefinidos. Especifique a finalidade da recuperação e clique em Criar Solicitação de Recuperação.

12. Após o uso ativo dos logs recuperados, se você quiser liberá-los novamente para o pool do archive, clique em no ícone do menu de ações na linha correspondente aos logs recuperados e selecione Liberar.

    Os logs recuperados serão liberados de volta para o pool de arquivos compactados. Isso permitirá otimizar o tamanho e o custo do armazenamento.

    Observação
    
    

    Ao liberar os logs recuperados usando a API REST, anote o intervalo de tempo de recuperação da console ou da CLI e formate o horário da seguinte forma:

    • Horário inicial da recuperação: Arredonde para baixo (piso) o valor. Se a hora inicial da recuperação for From Mon, Mar 7, 2022, 05:45:33 UTC, arredonde a hora para baixo e especifique-a como from_time=2022-03-07T5:45:32.000Z.
    • Recall end time: Arredonde para cima (ceil) o valor. Se a hora final da recuperação for To Wed, Mar 15, 2023, 17:26:53 UTC, arredonde a hora e especifique-a como to_time=2023-03-15T17:26:54.000Z.

Se você obter dados de log duplicados no Log Explorer ou nos Painéis de Controle porque há duas ou mais recalls sobrepostos, poderá adicionar o predicado de consulta recall purpose em sua pesquisa para ver apenas a recuperação relevante. Consulte Predicado de Consulta para Filtrar os Logs Rechamados

O Oracle Log Analytics permite expurgar eventos de log que foram carregados por agente ou por um upload sob solicitação, para reduzir o tamanho do índice dos dados do log.

1. Abra o menu de navegação e clique em Observabilidade e Gerenciamento. Em Log Analytics, clique em Administração.

   Os recursos administrativos são listados no painel esquerdo de navegação em Administração. Clique em Armazenamento.

   A página Armazenamento é exibida.

2. Na página Armazenamento, você pode expurgar dados de log em um dos seguintes métodos:
   • Executar Expurgação sob demanda:

     Clique em Expurgar Logs. A caixa de diálogo Expurgar Logs é exibida.

     • Selecione o compartimento no qual os logs devem ser expurgados.

     • Especifique se os subcompartimentos também devem ser incluídos na Expurgação.

     • Selecione a data e a hora anteriores à qual os dados de log que devem ser expurgados foram coletados.

       A ação de expurgação é executada nos dados de log de todos os buckets do compartimento selecionado que foram coletados antes do período especificado. Por exemplo, se você especificar a data e a hora como November 2, 2020 12:00:00 e o compartimento Analyze, os dados de log com o timestamp anterior a November 2, 2020 12:00:00 armazenados no compartimento Analyze serão excluídos.

     • No campo Consulta, digite a consulta para selecionar um conjunto específico de dados de log. Por exemplo, para selecionar os logs das entidades do tipo Host Linux, especifique a consulta 'Entity Type'='Host (Linux)'.

       Consulte Exemplo de Consultas para Expurgar Dados de Log.

     • Clique em Estimar Armazenamento Reivindicado para determinar o tamanho do armazenamento que pode ser reivindicado com base na seleção feita nos campos anteriores.

     • Clique em Expurgar.

   • Criar uma política de expurgação para expurgar logs com base em uma consulta ou vencimento:

     Em Expurgar Políticas, clique em Criar Política de Expurgações. A caixa de diálogo Criar Política de Expurgação é aberta.

     • Digite um nome para a nova política de expurgação.

     • Selecione o compartimento do grupo de logs para consultar os logs. Opcionalmente, você pode especificar se os subcompartimentos também devem ser consultados para os logs especificados.

     • Em Expurgar Logs Mais Antigos que, selecione o período a partir do qual os dados de log devem ser expurgados.

     • Em Intervalo de Programação, selecione a periodicidade e o horário da ação de expurgação.

     • No campo Consulta, digite a consulta para selecionar um conjunto específico de dados de log. Por exemplo, para selecionar os logs da origem Apache HTTP Server Access Logs, especifique a consulta 'Log Source'='Apache HTTP Server Access Logs'.

       Consulte Exemplo de Consultas para Expurgar Dados de Log.

     • Clique em Estimar Armazenamento Recuperado para determinar o tamanho do armazenamento que seria reivindicado se as seleções feitas nos campos anteriores fossem aplicadas agora.

     • Opcionalmente, clique em Mostrar Opções Avançadas e adicione tags à sua política de expurgação.

     • Clique em Criar.

     A política de expurgação é criada e será executada periodicamente, conforme definido nas etapas anteriores.

     Observação
     
     

     Se uma política de expurgação não tiver a permissão necessária, a política do IAM for alterada ou o compartimento de expurgação for excluído, a tarefa de expurgação poderá informar o estado Pausado. O valor da métrica de status das tarefas de expurgação, conforme visto no serviço Monitoring, pode ser NotAuthorizedOrNotFoundPurgeResource ou PausedByUser.

     Modifique/restaure as instruções de política do serviço IAM conforme necessário, restaure o compartimento de expurgação se ele tiver sido excluído anteriormente e Retome manualmente a tarefa de expurgação.

   Para excluir uma política, clique em Ações ícone ao lado do nome da política e clique em Excluir.

   Para exibir as atividades de expurgação executadas, na página Armazenamento, em Recursos, clique em Relatório de Atividades. A página Relatório de Atividade é exibida, resumindo todas as atividades de armazenamento. Use os filtros Status e Tempo para exibir as atividades de expurgação preferenciais.

Você pode usar o predicado Recall para filtrar apenas os logs recuperados, apenas os dados ativos ou ambos. Forneça um valor que corresponda ao nome da recuperação. Você pode usar operadores boolianos e de comparação, como =, !=, IN, NOT IN, LIKE e NOT LIKE, na consulta.

Por exemplo:

• Para filtrar somente dados da Análise de Indisponibilidade de Serviço 2025-03-01:

  Recall = 'Outage Analysis 2025-03-01'

• Para filtrar dados de Análise de Tráfego de Rede 2024 e Tráfego do Dia da Mão de Obra 2024:

  Recall IN ('Network Traffic Analysis', 'Labor Day Sale')

• Para filtrar dados de todos os recalls que têm nome/finalidade como Análise de Indisponibilidade de Serviço 2025...:

  Recall like 'Outage Analysis 2025*'

• Para filtrar todos os dados diferentes de Tráfego do Dia da Mão de Obra de 2024 e Tráfego de Natal de 2024:

  Recall not in ('Labor Day Traffic 2024', 'Christmas Traffic 2024')

• Para ver apenas dados ativos:

  Recall = null

Você pode exibir o resumo das atividades de arquivamento, recuperação, liberação e expurgação para manter o controle completo do uso do armazenamento e também rastrear o status dos principais logs que fazem parte das atividades.

1. Abra o menu de navegação e clique em Observabilidade e Gerenciamento. Em Log Analytics, clique em Administração.

2. Os recursos administrativos são listados no painel esquerdo de navegação em Administração. Clique em Armazenamento.

   A página Armazenamento é exibida.

3. Clique em Relatório de Atividades.

   A guia exibe o resumo das atividades do armazenamento iniciadas, como expurgar a política, expurgar sob demanda, arquivar, arquivar a solicitação de rechamada e a liberação de rechamada.

4. Use os filtros Tipo de Atividade, Status e Tempo no painel esquerdo para restringir a pesquisa das atividades de armazenamento.

5. Expanda a linha da atividade de armazenamento para exibir mais detalhes sobre ela.