Engenheiro de Dados Sênior | Automações com IA | Azure e AWS
RemoteBrazil
Job Summary
Design and develop data ingestion pipelines from diverse sources including ETLs, APIs, relational and non-relational databases, telemetry sensors, and files. Integrate and consolidate data across Azure and AWS ecosystems while implementing scalable architectures for processing, storage, and decision-making support. Manage Data Lakes, Data Warehouses, and Data Marts using tools like Azure Data Factory, Databricks, Synapse Analytics, AWS Glue, Lambda, and Redshift. Optimize ETL/ELT processes, monitor data loads for performance bottlenecks, and ensure governance, security, and scalability. Collaborate directly with data scientists, functional analysts, and business units. This long-term modernization program focuses on innovation, data, AI, productivity, and process automation.
Required Qualifications
- Experiência sólida como Engenheiro de Dados na construção de pipelines escaláveis
- Domínio de soluções em nuvem na AWS (S3, Redshift, Glue, Athena) e Azure (Data Factory, Synapse, Databricks, Azure SQL, Blob Storage, Monitoramento)
- Experiência na integração de dados via APIs REST/SOAP e no processamento em tempo real
- Domínio de bancos de dados relacionais (SQL Server, PostgreSQL) e não relacionais (CosmosDB, DynamoDB, MongoDB)
- Proficiência em Python, Spark, SQL e PowerShell/Bash para manipulação e engenharia de dados
- Prática com cultura DataOps, versionamento de código (Git) e esteiras CI/CD para dados
- Conhecimento em modelagem de dados, otimização de consultas (query tuning) e performance de bancos de dados
- Conhecimento sobre boas práticas de segurança, governança e conformidade (LGPD)
- Boa comunicação verbal e escrita, com capacidade de documentação técnica e interlocução com times de negócio
Desired Qualifications
- Experiência com arquiteturas orientadas a eventos (event-driven) utilizando AWS Kinesis, Azure Event Hub ou Apache Kafka
- Vivência na implementação de pipelines de Machine Learning e MLOps em ambientes de nuvem
- Certificações Microsoft (ex: DP-203 – Azure Data Engineer Associate) ou AWS (ex: AWS Certified Data Engineer / Data Analytics)
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.