Engenheiro(a) de Dados – Azure Databricks
Remote · Brazil
Job Summary
Engenheiro(a) de Dados – Azure Databricks na Vetta. O papel envolve desenvolver, manter e otimizar pipelines de dados em ambiente Azure Databricks, com ingestão, transformação e disponibilização de dados para consumo analítico ou operacional, além de apoiar a modelagem de dados em arquiteturas Lakehouse/Lake. Responsável por notebooks, jobs e rotinas de processamento com Databricks, integração de fontes de dados, colaboração com equipes técnicas/de negócio, e a promoção de boas práticas de performance, governança, versionamento e documentação técnica. Requisitos incluem experiência prática com Azure Databricks, Spark/PySpark, Python e/ou SQL, serviços Azure relacionados a dados, conceitos de Data Lake/Lakehouse, ETL/ELT, Git, segurança e governança em cloud, além de inglês intermediário e disponibilidade para viagens. Diferenciais: Medallion Architecture, Delta Lake, automação/monitoramento de pipelines, experiência em indústria/manufatura/energia, integração com sistemas corporativos, histórico de dados, CI/CD em dados. Benefícios incluem plano de saúde, odontológico, vale-refeição, flexibilidade, programas de bem-estar, e benefícios variados.
Required Qualifications
- Experiência prática com Azure Databricks
- Conhecimento em Apache Spark / PySpark
- Experiência com Python e/ou SQL para manipulação e transformação de dados
- Familiaridade com Azure Data Lake Storage; Azure Data Factory; Azure Synapse Analytics; Azure SQL Database; Azure DevOps
- Conhecimento em Data Lake, Lakehouse, ETL/ELT e pipelines de dados
- Experiência com versionamento de código, preferencialmente Git
- Noções de segurança, controle de acesso e governança de dados em ambiente cloud
- Ingles intermediário
- Disponibilidade para viagens
Apply with one swipe on Sorce. We auto-fill applications and apply on your behalf — no cover letters, no 40-minute forms.
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.