Tempo aproximado para leitura: 03:00:00 min
Dúvida
Como visualizar as tarefas de pipeline e de quanto em quanto tempo elas executam?
Ambiente
TOTVS CAROL - Plataforma Carol - Todas as versões
Solução
O pipeline é responsável por processar os dados brutos que chegam nas stagings tables, transformando esses dados e os preparando para que sejam armazenados na camada de dados definida em Data Model.
Para entender o que é um Data Model, acesse a documentação a seguir:
TOTVS CAROL - Carol Plataforma - O que é um Data Model
Para visualizar a execução das tarefas da pipeline, clique no ícone de "Sininho" no canto superior direito da tela e em seguida em View All:
Será exibido todo histórico de atividades feitas no ambiente, para visualizar especificamente as execuções da pipeline primeiro será necessário adicionar um filtro para visualizar as tarefas internas do ambiente, para isso clique no botão Hide Internal Tasks e selecione False:
Com este filtro aplicado é possível visualizar todas as tarefas internas que são executadas:
Agora é necessário realizar um filtro especifico do Data Model que deseja validar a pipeline, para isso clique em Filter e selecione Data Model, basta escolher o DM desejado e aplicar, conforme o exemplo abaixo:
Será listado todas as execuções de pipeline relacionadas a este Data Model, A task de execução de pipelines são Process Data using BigQuery:
Para que o processamento de dados via pipeline seja realizado, é necessário que ele entre na fila de execuções, abaixo você pode identificar em quanto tempo cada pipeline é adicionado nessa fila para execução:
- Clock in records (marcações):
De segunda a sexta, no período entre às 07h e 20h é executado a cada 30 minutos.
De segunda a sexta, no período entre às 21h e 06h é executado a cada 1 hora.
Sábado e domingo é executado a cada 1 hora.
- Employee Photos Approval (aprovações de marcações e imagens):
De segunda a sexta, no período entre às 05h e 18h é executado a cada 30 minutos.
De segunda a sexta, no período entre às 19h e 04h é executado a cada 1 hora.
Sábado e domingo é executado a cada 1 hora.
- Employee (funcionários):
É executado todos os dias a cada 1 hora.
- User (usuários):
De segunda a sexta, no período entre às 06h e 18h é executado a cada 1 hora.
De segunda a sexta, no período entre às 19h e 05h é executado a cada 4 horas.
Sábado e domingo é executado a cada 4 horas.
- Company (empresas)
É executado todos os dias a cada 1 hora.
Temos também um artigo que detalha como funciona a integração dos dados com o Clock in BackOffice:
TOTVS CAROL - Carol Plataforma - Como funciona a integração de dados com o Backoffice?
Saiba Mais
CLIQUE AQUI para acessar mais artigos e FAQs sobre a TOTVS Carol
CLIQUE AQUI para acessar a documentação técnica da TOTVS Carol no TDN
CLIQUE AQUI para acessar a documentação técnica da TOTVS Carol do LABS
0 Comentários