Especialista Databricks (Data & IA)
Remote · Brazil or BR
Job Summary
Especialista Databricks (Data & IA) com atuação remota no Brasil, responsável por liderar projetos ponta a ponta na plataforma Databricks integrando engenharia de dados com cenários de IA Generativa, agentes inteligentes e soluções de Segurança/Cibersegurança. Responsável por desenhar, desenvolver e gerenciar pipelines de ingestão em batch e streaming, governança de dados em Lakehouse, deploy de aplicações de dados e agentes de IA, otimização de consultas, troubleshooting de pipelines, e suporte a atividades de Security Lakewatch e detecção de Threat Intel. Requisitos incluem certificação Databricks ativa (Data Engineer Associate ou Professional), experiência prática com Delta Lake, Structured Streaming, Unity Catalog, Databricks SQL, IA/ML (AGI, agentes, MLOps) e itens de segurança/observabilidade; diferencialmente, experiência com GenAI, migração de plataformas legadas para Lakehouse, contribuições em comunidades Databricks, e projetos de SecOps/automação de resposta a incidentes. Benefícios, regime CLT com jornada de 40h semanais, modalidade remota e plano de saúde/benefícios descritos.
Required Qualifications
- Databricks certification active (Data Engineer Associate or Professional)
- solid experience with Delta Lake (OPTIMIZE, Z-ORDER, liquid clustering, Change Data Feed, time travel)
- experience with Structured Streaming and Auto Loader
- proficiency in Unity Catalog governance and security
- practical knowledge of Databricks SQL, Photon Engine, and analysis tooling
- experience with AI/ML workflows, agents (Genie Spaces/Code, Mosaic AI Agent Framework, RAG, tool-calling) and MLOps (MLflow, Feature Store)
- experience building production-grade data apps and security-oriented data pipelines
- experience with security observability and incident response pipelines
- ability to deploy data apps and agents on the Databricks platform
- knowledge of Databricks Apps and Lakehouse architectures
- understanding of security, governance, and incident response in critical production environments
Apply with one swipe on Sorce. We auto-fill applications and apply on your behalf — no cover letters, no 40-minute forms.
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.