Compass logo
Compass1 week ago

Data Engineer | specialist (Remote)

Remote · Brazil

Type
Full Time
Level
Mid Level
Education
Not Specified
Company size
Unknown

Job Summary

Projeto e implementação de soluções de IA para modernizar dados e sistemas legados. Desenvolver mecanismos para análise, interpretação e extração de informações técnicas de artefatos legados; criar soluções baseadas em IA Generativa para acelerar documentação, transformação e migração; criar modelos intermediários de metadados para representar fluxos, regras de negócio, dependências, entidades e transformações; desenvolver aceleradores e componentes reutilizáveis em conformidade com a arquitetura de dados da empresa; apoiar templates, padrões técnicos e estruturas declarativas para pipelines modernos; evoluir pipelines com Databricks, PySpark, Lakeflow Jobs e Declarative Pipelines; trabalhar com cargas batch, ingestões incrementais, CDC e integrações corporativas; apoiar governança, rastreabilidade e qualidade dos dados durante migração; colaborar com arquitetos, engenheiros de dados e especialistas de plataforma para soluções escaláveis e seguras; atuar com IA aplicada à engenharia de dados, engenharia de software ou automação técnica; conhecimentos práticos em IA Generativa e LLMs; experiências com Agentes de IA, RAG, Prompt Engineering, Function Calling, Tool Use, Workflows automatizados; frameworks de orquestração de IA (LangChain, LangGraph, Semantic Kernel, CrewAI ou equivalentes); Python, PySpark, Spark SQL; desenvolvimento de pipelines em ambientes distribuídos; conhecimento de SQL, XML, JSON e YAML; modelagem de dados e Data Warehouse; vivência com Databricks.

Required Qualifications

  • Experiência com Inteligência Artificial aplicada à Engenharia de Dados, Engenharia de Software ou Automação Técnica.
  • Conhecimento prático em IA Generativa e Large Language Models (LLMs).
  • Experiência com PySpark e Spark SQL.
  • Experiência com Databricks e pipelines de dados em ambientes distribuídos.
Sorce

Apply with one swipe on Sorce. We auto-fill applications and apply on your behalf — no cover letters, no 40-minute forms.

Hiring someone like this?

Get your role in front of qualified candidates on Sorce.

Get started

Compass

Data Engineer | specialist (Remote)

Apply on Sorce