Carregando...
Carregando...
Trilha de Data Engineering da MedCof, do Estágio ao Principal, cobrindo pipelines (ETL/ELT), modelagem de warehouse/lakehouse, orquestração, processamento, qualidade, custo, segurança e privacidade (LGPD) dos dados.
Você conduz projetos de dados de média complexidade com autonomia, constrói pipelines robustas, modela camadas dimensionais e cuida de qualidade, custo e confiabilidade dos dados.
Você acumula capacidade de modelagem, orquestração, otimização, observabilidade e colaboração cross-funcional, propondo soluções melhores e não apenas executando pedidos.
Você constrói pipelines de média complexidade com idempotência, reprocessamento e tratamento de falhas, atendendo requisitos de frescor e confiabilidade.
Você modela camadas dimensionais (estilo Kimball) e marts de média complexidade, equilibrando normalização, performance e clareza para consumo.
Você estrutura orquestrações de média complexidade com dependências, retries, SLAs e alertas, garantindo execução confiável das pipelines.
Você implementa processamento batch de média complexidade e participa de soluções de streaming, cuidando de particionamento e volume.
Você escreve código de média complexidade reutilizável, identifica gargalos de performance e otimiza queries e jobs.
Você provisiona e ajusta recursos de dados em nuvem de média complexidade (storage, warehouse, compute), aplicando boas práticas de configuração.
Você implementa testes de dados, monitoramento e alertas de média complexidade, e investiga incidentes de qualidade.
Você monitora custo e tempo de execução das suas pipelines e aplica otimizações simples de particionamento e processamento.
Você aplica controles de acesso, anonimização e retenção em pipelines de média complexidade, considerando dados sensíveis e LGPD.