[Job-31068] Engenheiro de Dados Sênior SAS , Brazil
On-siteCampinas, São Paulo, Brazil
Job Summary
Develop and maintain ETL/ELT pipelines in Azure using Databricks for data processing and integration. Implement CI/CD practices for code versioning and deployment automation on GitHub. Design and optimize data models to ensure scalability, performance, and governance across the ecosystem. Support cloud migration projects while guaranteeing data security, quality, and integrity. Collaborate with business and data science teams to deploy AI models in cloud environments. Ensure data quality and consistency through profiling and monitoring techniques. Document processes, architectures, and data engineering best practices. This senior role focuses on transforming SAS codebases to Python/PySpark within a Data Lake and Warehouse environment. Mandatory presence in the Campinas metropolitan area is required.
Required Qualifications
- Experiência sólida em Azure Data Services e Databricks
- Experiência com definição de estratégias, padrões e boas práticas para conversão de códigos SAS para Python/PySpark
- Vivência com apoio técnico para migração de processos, rotinas e soluções analíticas de SAS para Databricks
- Experiência com Databricks com PySpark
- Experiência com arquitetura medalhão
- Domínio de Python e SQL para manipulação e transformação de dados
- Conhecimento em CI/CD e versionamento com GitHub
- Experiência em modelagem de dados (conceitual, lógica e física)
- Vivência em projetos de migração para cloud
- Experiência em ETL/ELT e integração de grandes volumes de dados
- Presença nos escritórios da Região Metropolitana de Campinas (obrigatória para residentes na região)
Desired Qualifications
- Experiência com deploy de modelos de IA e uso de ferramentas como Azure ML
- Experiência com projetos de IA e automação de pipelines
- Participação em iniciativas de MDM (Master Data Management)
- Atuação em ambientes Data Lake e Data Warehouse
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.