DW1224 - Arquiteto (a) de Dados Big Data (MS Azure / Databricks) - Sênior
Grupo Dream Work
Publicada há 3 anos
Regime de contratação
CLT
Modelo de trabalho
Remoto
Carga horária
44 horas semanais
Descrição
Selecionamos para empresa de tecnologia da informação de São Paulo / SP
Requisitos:
- Inglês Avançado;
- Experiência em tradução de requisitos de negócios em especificações técnicas, incluindo pipelines
de fluxos de dados, integrações, transformações e bancos de dados em ecossistema Big Data; - Definição a estrutura da arquitetura de dados, padrões e princípios, componentes de arquitetura, modelagem, metadados, segurança, dados de referência e infraestrutura;
- Experiência de no mínimo 3 anos em tecnologias na nuvem, essencialmente Microsoft Azure;
- Necessário ter experiência mínima de 5 anos em processos de Ingestão, manipulação e tratamento de dados em Data Lake (ADLS);
- Conhecimento de no mínimo 3 anos nas Ferramentas: Azure Data Factory, Azure Databricks (Python, Spark, Spark SQL). Desejáveis: Azure Synapse, Azure Analysis Services;
- Linguagem de Programação: Python, Spark, Java Banco de dados relacional e No-SQL;
- Desejável conhecimento de DataOps e conceitos de CI/CD.