Considerações de Desempenho para Atualização de Dados Frequentes
Revise e considere o seguinte para garantir que as atualizações frequentes de dados funcionem conforme esperado.
O desempenho de atualizações de dados frequentes depende do seguinte:
- Tamanho dos dados.
- Alteração de dados, como quais dados foram alterados e qual pipeline é acionado.
- Número de registros extraídos que podem resultar em um número muito diferente de registros publicados. Por exemplo, em um cenário, 44 registros extraídos resultaram em 1060 registros publicados em 70 minutos e 395 registros extraídos resultaram em 55 registros publicados em 35 minutos.
O processo de atualização frequente de dados não é executado nos seguintes cenários:
- Na janela de 180 minutos antes do início programado da atualização diária de dados incrementais.
- Se alguma atualização de versão estiver em andamento.
- Até que o processo de atualização de dados frequente anterior seja concluído. Você pode definir uma frequência máxima de 1 hora. Se levar mais de 1 hora para concluir a atualização, o próximo processo de atualização de dados frequente começará na próxima hora.
Siga estas diretrizes para configurar a atualização frequente de dados das tabelas do warehouse, ou seja, as dos conjuntos de dados:
- Certifique-se de saber os nomes exatos dos conjuntos de dados a serem atualizados.
- Especifique no máximo 20 conjuntos de dados para cada execução.
- Determine quaisquer dependências e inclua as tabelas aplicáveis porque as dependências não são incluídas automaticamente.