Engenheiro de Dados Sênior Databricks/DBT

About this role

A Leega é uma empresa focada no atendimento eficiente e inovador em seus clientes. Isso não poderia ser diferente com o nosso principal combustível: as pessoas! Nossa cultura é inspiradora e nossos valores estão presentes no dia a dia: ética e transparência, excelência de qualidade, trabalho em equipe, responsabilidade econômica, social e ambiental, relações humanas e credibilidade. Buscamos profissionais inovadores que sejam movidos por desafios e focados em resultados. Se você busca uma empresa dinâmica e parceira e que investe em seus colaboradores através de capacitação constante, a Leega é o lugar para você! >> A LEEGA É PARA TODOS, ficaremos muito felizes em ter você em nosso time. Venha fazer parte da nossa história e da construção do nosso futuro. Cadastre-se agora mesmo em nossas vagas! Buscamos um profissional Sênior para construir e evoluir a nova plataforma de dados da empresa, baseada em DBT sobre Databricks. A posição tem forte cultura de engenharia de software, CI/CD e DevOps, com foco em projetar a fundação da plataforma — garantindo escalabilidade, governança, automação e confiabilidade. O trabalho envolverá tanto a arquitetura quanto a operação da plataforma, com atuação direta na evolução para DBT Fusion / dbt Core 2.0. Arquitetura & Modelagem • Projetar e implementar a arquitetura da plataforma dbt sobre Databricks (Unity Catalog, camadas medallion: bronze/silver/gold). • Estruturar o projeto DBT: padrões de modelagem, naming, camadas (staging/intermediate/marts), macros, testes e documentação. • Modelagem dimensional (Kimball, star schema) e/ou Data Vault conforme necessidade. Engenharia de Plataforma & DevOps • Construir pipelines de CI/CD para DBT(validação, build, testes, deploy por ambiente — dev/staging/prod) via GitHub Actions. • Automatizar provisionamento e operação via IaC (Terraform) e Databricks Asset Bundles. • Desenvolver e manter Workflows no Databricks para orquestração de pipelines. • Gerenciar ambientes reproduzíveis com versionamento de código (Git/GitFlow/Trunk-based). Performance & Custo • Otimizar custo e performance (clusters, SQL Warehouses, Photon, particionamento, incrementais). • Trabalhar com Delta Lake, Parquet e formatos de dados distribuídos. • Explorar Apache Spark e PySpark para casos além do SQL quando necessário. Governança & Segurança • Definir governança e segurança de dados (Unity Catalog, controle de acesso, masking de dados sensíveis). • Garantir compliance com LGPD e boas práticas de privacidade de dados. Liderança Técnica • Mentorar o time em boas práticas de engenharia analítica. • Revisar código (PRs) e garantir qualidade técnica das entregas. • Atuar em ambientes ágeis e colaborativos. Obrigatórios • DBT Core: modelos incrementais, snapshots, macros (Jinja), testes, packages, exposures — mín. 4 anos. • Databricks: Unity Catalog, SQL Warehouses, clusters, Delta Lake, Workflows — mín. 4 anos. • Apache Spark e processamento distribuído de dados. • Python e SQL avançado. • GitHub Actions para CI/CD de pipelines de dados. • Databricks Asset Bundles para empacotamento e deploy. • Git e fluxo colaborativo (trunk-based ou GitFlow, PRs, code review). • Cloud computing — preferencialmente GCP (Azure ou AWS também aceitos). • Ferramentas de ETL/ELT e integração de dados. • Cultura de testes automatizados, versionamento e deploy reproduzível. Desejáveis / Diferenciais • dbt Fusion / migração para dbt Core 2.0 (engine em Rust, parsing acelerado). [DIFERENCIAL] • Terraform e IaC para gerenciamento de ambientes e secrets. [DIFERENCIAL] • Orquestração com Airflow ou Dagster. • Kubernetes e containers (Docker). • Observabilidade de dados: dbt docs, Elementary, Monte Carlo, OpenLineage. • Experiência com mascaramento de dados sensíveis / LGPD e compliance. • Modelagem dimensional Kimball / star schema / Data Vault. Trabalho 100% remoto Informações adicionais Na nossa empresa, você encontrará um ambiente colaborativo e um pacote de benefícios que visa o seu crescimento, saúde e qua

Skills and categories