Engenheiro de dados Sênior
inventCloud
Nova
São Paulo - SP
Publicada há 8 horas
Inscrições até 07/11/26
Inscrições até 07/11/26
Regime de contratação
Não Informado
Modelo de trabalho
Não Informado
Carga horária
Não Informado
Descrição
Engenheiro(a) de Dados Sênior (Azure & Databricks)
Estamos em busca de um(a) Engenheiro(a) de Dados Sênior com sólida expertise em Microsoft Azure e Databricks para fortalecer nossa equipe de dados. Você será peça chave na construção e otimização de nossa infraestrutura de dados escalável, garantindo que nossos dados sejam acessíveis, confiáveis e prontos para impulsionar análises e modelos de Machine Learning. Venha fazer a diferença em um ambiente dinâmico e colaborativo!
Suas Responsabilidades Incluirão:
- Projetar e Construir Pipelines: Desenvolver, implementar e manter pipelines de ingestão e transformação de dados robustos e eficientes, utilizando Azure Data Factory, Azure Functions e Databricks.
- Otimização e Escalabilidade: Garantir a performance e escalabilidade de soluções de dados em grande volume (Big Data) com Apache Spark no ambiente Databricks.
- Modelagem de Dados: Criar e gerenciar modelos de dados eficazes em Data Lakes (Azure Data Lake Storage Gen2) e Data Warehouses (Azure Synapse Analytics ou Databricks SQL Analytics).
- Qualidade e Governança: Implementar e monitorar rotinas de qualidade de dados, garantindo a integridade, consistência e segurança das informações.
- Colaboração e Inovação: Trabalhar em estreita colaboração com cientistas de dados, analistas de negócios e outras equipes para entender suas necessidades e entregar soluções inovadoras.
- Automação e CI/CD: Utilizar ferramentas de CI/CD (Azure DevOps) para automatizar o deploy e a gestão de projetos de dados.
O Que Buscamos em Você:
- Experiência Comprovada: Mínimo de 5 anos de experiência em Engenharia de Dados, com foco em plataformas cloud.
- Expertise em Azure: Sólida experiência com serviços Azure, incluindo Azure Data Lake Storage Gen2, Azure Data Factory, Azure Synapse Analytics e/ou Azure SQL Database.
- Domínio de Databricks/Spark: Proficiência no uso do Databricks e Apache Spark (PySpark ou Scala) para processamento de dados em larga escala.
- Linguagens de Programação: Excelentes habilidades em Python e SQL.
- Conceitos de Dados: Forte entendimento de arquiteturas de Data Lake, Data Warehouse, modelagem dimensional e processos ETL/ELT.
- Resolução de Problemas: Capacidade analítica aguçada e proatividade na identificação e resolução de desafios complexos.
- Comunicação: Boa comunicação interpessoal e colaborativa.
Seria um Diferencial :
- Certificações Microsoft Azure (DP-203 ou similares) ou Databricks.
- Experiência com Delta Lake, Unity Catalog e/ou MLflow.
- Conhecimento em ferramentas de visualização de dados como Power BI.
- Familiaridade com metodologias ágeis (Scrum/Kanban).
O Que Oferecemos:
- Pacote de remuneração competitivo.
- Oportunidades de desenvolvimento profissional e treinamentos constantes.
- Ambiente de trabalho flexível (híbrido/remoto ).
- Cultura que valoriza a inovação, colaboração e o bem-estar.
- Acesso às mais novas tecnologias e ferramentas do mercado.