Senior Data Engineer Databricks (m/f/d)
HybridReus, Catalonia, Spain
Job Summary
Design and evolve ETL/ELT processes for the data platform, ensuring alignment with business requirements. Implement data ingestion, transformation, and persistence workflows within Data Lake, Warehouse, or Lakehouse environments. Establish data quality controls, validation rules, and lineage mechanisms while defining technical standards and development patterns. Act as the technical reference for the Data Engineering team, providing expert support, code reviews, and mentoring. Coordinate directly with clients on design decisions and strategy, collaborating with architects, BI, and data science teams to ensure ecosystem coherence. Optimize production process performance, scalability, and reliability. Document architecture, data flows, and critical platform processes.
Required Qualifications
- Más de 6 años de experiencia en proyectos de Data Engineering e integración de datos
- Amplia experiencia en definición e implementación de procesos ETL/ELT complejos
- Dominio avanzado Databricks
- Dominio avanzado Python
- Dominio avanzado SQL
- Experiencia en procesamiento distribuido con Spark / PySpark
- Experiencia en diseño de arquitecturas de datos modernas (Data Lake, Data Warehouse, Lakehouse)
- Conocimiento sólido de aseguramiento de calidad del dato (validaciones, controles, reconciliaciones, data lineage)
- Experiencia trabajando en entornos cloud (Azure, AWS o GCP)
- Conocimiento y uso de CI/CD y control de versiones con Git aplicados a pipelines de datos
- Capacidad para liderar técnicamente a equipos
- Habilidades de comunicación y capacidad de interlocución con perfiles técnicos y de negocio
- Experiencia trabajando con metodologías ágiles
Desired Qualifications
- Certificación Data Engineering de Databricks
- Conocimiento/experiencia en Power BI
- Certificaciones cloud o de ingeniería de datos (Azure / AWS / GCP Data Engineer)
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.