Data Engineer II
RemoteBrazil
Job Summary
Design, code, test, and document data programs and scripts using agreed standards and tools to ensure structured results. Ensure data quality by implementing frameworks to automate problem identification and execute ETL processes using SQL, Python, and ETL/ELT support tools. Maintain existing workflows, process large data volumes, and plan solutions for data storage, security, and publication within the organization. Create and update process flow and business rule documentation. Assist management in creating estimates and proposals for clients. Maintain proficiency in advanced SQL queries and Python libraries while leveraging Databricks workflows and Apache Spark.
Required Qualifications
- Graduação em Ciência da Computação, Estatística, Matemática ou área relacionada.
- 3 a 5 anos de experiência em Engenharia de Dados e/ou Data Warehousing.
- Experiência em projetar e desenvolver pipelines de dados ETL/ELT.
- Proficiência na escrita de consultas SQL avançadas.
- Proficiência em Python e em diferentes bibliotecas Python.
- Forte capacidade analítica, com habilidade para compreender e comunicar o significado dos dados apresentados.
- Excelentes habilidades matemáticas, estadísticas e de lógica.
- Excelente capacidade de raciocínio.
- Perfil entusiasta, altamente motivado, com habilidade para aprender rapidamente.
- Experiência na criação de workflows ETL no Databricks.
- Compreensão de Apache Spark.
- Proficiência profissional completa em inglês é obrigatória.
Desired Qualifications
- Realizar chamadas, videoconferências, enviar e-mails, mensagens e se comunicar com concessionárias e colegas de trabalho.
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.