Pessoa Engenheira de Dados Sênior
RemoteBrazil
BrazilRemotePart TimeSenior Level
Part TimeSenior Level
Job Summary
Design complex data architectures and build high-performance pipelines for ingestion, transformation, and delivery to support RAG, analytics, and AI agents. Integrate diverse sources including databases, APIs, documents, and cloud environments while implementing governance, lineage, and security protocols for sensitive data. Collaborate with cross-functional teams to prepare structured and unstructured datasets for machine learning models and semantic search mechanisms. Manage batch, near real-time, and streaming workflows using tools like Spark, Airflow, and Kafka to ensure data quality, observability, and reliability across the organization.
Required Qualifications
- Domínio na construção de arquiteturas de dados complexas
- Projetar, construir e manter pipelines de dados batch, near real time ou streaming
- Integrar fontes diversas, incluindo bancos de dados, APIs, arquivos, documentos, sistemas corporativos e ambientes cloud
- Criar camadas de dados confiáveis para analytics, aplicações de IA, RAG, embeddings e automações
- Implementar processos de ingestão, transformação, modelagem, qualidade, validação e monitoramento de dados
- Trabalhar com dados estruturados e não estruturados, incluindo documentos, logs, tabelas, eventos e bases transacionais
- Implementar práticas de governança, linhagem, data contracts, versionamento e documentação
- Tratar dados sensíveis com boas práticas de segurança, privacidade, anonimização e mascaramento
- Trabalhar junto aos times de IA, Machine Learning, Plataforma, Produto e Full Stack
- Experiência com engenharia de dados em ambientes cloud, híbridos ou corporativos
- Conhecimento sólido em SQL e Python
- Experiência com Spark, Databricks, Airflow, dbt, Data Factory, Glue, Kafka ou ferramentas equivalentes
- Familiaridade com data lake, lakehouse, data warehouse e modelagem de dados
- Experiência com ETL, ELT, orquestração, monitoramento e tratamento de falhas
- Conhecimento em qualidade de dados, testes, performance e rastreabilidade
- Capacidade de trabalhar com múltiplas fontes e formatos de dados
- Atenção a segurança, LGPD, governança e controle de acesso
- Perfil cuidadoso, técnico e organizado
- Entendimento de que IA depende diretamente da qualidade, disponibilidade e governança dos dados
- Contratação: Via modelo cooperativa
- Modelo de Trabalho: Anywhere Office - trabalhe de onde se sentir confortável
Desired Qualifications
- Experiência com pipelines para RAG, embeddings, bases vetoriais e preparação de documentos para IA
- Conhecimento em pgvector, busca híbrida, busca semântica ou mecanismos de recuperação de contexto
- Vivência com catálogos de dados, linhagem, data observability e data contracts
- Experiência com CDC, arquitetura orientada a eventos ou streaming
- Conhecimento em DLP, classificação de informação, mascaramento e anonimização
- Experiência em ambientes com múltiplos sistemas legados e requisitos corporativos de segurança
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.