Agendar demonstração

Tutorial de paginação

Ao construir um fluxo de integração, você pode precisar processar grandes quantidades de dados. Processar todos esses dados de uma vez pode causar erros, como um erro do tipo timeout ou Out of Memory (OOM). Uma solução para esse problema é a paginação. Usando a paginação, você pode dividir o processo de consulta dos dados em etapas e recuperar somente uma quantidade limitada de registros por vez.

Nos artigos seguintes, vamos lhe guiar acerca de como implementar a paginação em um fluxo que realiza uma migração total de um banco de dados de HR diariamente às 1 da manhã.

Quando você copia componentes na Digibee Integration Platform, eles são armazenados na sua área de transferência como objetos JSON. O objeto JSON que se refere ao pipeline de paginação descrito aqui está disponível no bloco expansível abaixo. Você pode copiá-lo e colá-lo no Canvas e fazer as alterações necessárias para sua implementação.

Antes de implementar a paginação, você deve checar se a API, banco de dados ou web service que você está consultando suporta paginação. Se não, você ainda pode melhorar a performance do seu fluxo de integração aumentando o tamanho da implementação dos seus pipelines.

Neste exemplo, o fluxo de paginação é ativado a cada cinco minutos. Ele começa com uma sequência de passos iniciais. Depois desses passos, o fluxo se divide em três caminhos, como mostrado abaixo:

Pipeline de paginação

  • O fluxo segue o caminho “FINISHED” se o processo de migração de dados já terminou naquele dia ou se ainda não é hora de iniciá-lo.

  • O fluxo segue o caminho “EXTRACTING_DATA” quando está na hora de iniciar o processo de migração e esse processo ainda não terminou.

  • O fluxo segue o caminho de erro caso um erro ocorra nos passos iniciais.

Nos artigos seguintes, vamos lhe instruir passo-a-passo sobre como construir cada um desses caminhos.

Deseja testar esse pipeline?

Copie o flowSpec abaixo e cole-o no seu Canvas:

AnteriorComo executar um teste de carga na DigibeePróximoTutorial de paginação - parte 1

Isto foi útil?