Desenvolvedor de Dados Pleno
Digisystem
Publicada há 10 dias
Regime de contratação
Não Informado
Modelo de trabalho
Não Informado
Carga horária
Não Informado
Descrição
- Desenvolver jobs/pipelines ETL/ELT (batch/streaming) a partir de especificações funcionais e técnicas.
- Implementar transformações nas camadas Bronze/Silver/Gold, seguindo padrões de modelagem e naming.
- Escrever e manter testes unitários e de integração (validações de schema, qualidade e regras de negócio).
- Versionar código em Git, abrir PRs, realizar code reviews e dar suporte a CI/CD de dados.
- Executar homologação técnica (ambientes, dados de teste, critérios de aceite) e apoiar a passagem para produção.
- Documentar pipelines, dependências e jobs; manter runbooks e guias de troubleshooting.
- Monitorar execuções (SLAs, alertas, reprocessos) e aplicar tuning de queries/processos quando necessário.
- Colaborar com analytics/engenharia para alinhar regras de negócio e resolver incidentes em dados.
- Experiência prática em desenvolvimento de pipelines ETL/ELT e transformações de dados.
- SQL avançado e Python; vivência com dbt e/ou Spark é diferencial.
- Conhecimento de data lakes/warehouses e do padrão Medalhão (Bronze/Silver/Gold).
- Experiência com orquestração (Airflow/Cloud Composer ou equivalente) e observabilidade (logs, métricas, alertas).
- Prática com Git, pull requests e integração contínua/entrega contínua (CI/CD).
- Noções de qualidade de dados (DQ checks), linhagem/metadados e boas práticas de documentação.
- Desejável experiência em cloud data platforms (preferência GCP: BigQuery, Cloud Storage, Dataflow/Dataproc, Pub/Sub, Dataplex) ou equivalentes em AWS/Azure.
- Formação em TI, Engenharias, Sistemas de Informação ou áreas correlatas. Certificações (ex.: dbt, GCP) são diferenciais.