Engenheiro de Dados Sênior (DBT & GCP)
RemoteBrazil
Job Summary
Engenheiro de Dados Sênior com foco em GCP e DBT. Atividades incluem sustentação e evolução de processos em ambiente GCP; desenvolvimento em Python; ingestão de dados com automação de pipeline; processamento e análise de grandes volumes de dados; criação e manutenção de fluxos de dados para dashboards; documentação de processos; levantamento de requisitos de bases de dados; construção e orquestração de pipelines; análise de requisitos de dados; uso de macros e templates; aplicação de tagueamento e construção de catálogo de dados; domínio de T-SQL (DML e DDL); ITSM; estrutura de dados, algoritmos e arquitetura de sistemas; princípios ágeis, trabalho em equipe e transparência; foco na qualidade do código; saberes em APIs de dados e dbt com Jinja; ferramentas Google Cloud (BigQuery, Dataproc, Dataflow, Composer/Airflow) e domínio de Pub/Sub, Monitoring, Logging, Functions, Storage; experiência com Git; mínimo de 5 anos de experiência comprovada.
Required Qualifications
- Experiência mínima comprovada de 5 anos em engenharia de dados (obrigatório)
- Conhecimento em dbt (Data Build Tool), principalmente dbt Core
- Experiência com Google Cloud Platform (BigQuery, Dataproc, Dataflow, Composer/Airflow) e conhecimento avançado de estruturas
- Conhecimento em Python
- Conhecimento em SQL avançado
- Experiência com bancos NoSQL (MongoDB)
- Experiência em modelagem de dados e projetos BigData
- Vivência em Git
- Capacidade de trabalhar com ingestão de dados, pipelines e dados para dashboards/relatórios
Hiring someone like this?
Get your role in front of qualified candidates on Sorce.