Design and optimize scalable Databricks data pipelines and infrastructure, applying data governance practices to improve data quality, lineage, security, and reliability across enterprise data platforms.
Engenheiro(a) de Dados | Arquitetura de Dados (Databricks)
📜 Description
- Desenvolver e evoluir a plataforma corporativa de dados, garantindo escalabilidade, qualidade e governança.
- Construir e manter pipelines de dados com Databricks e Azure Data Factory.
- Evoluir a arquitetura Data Lakehouse e as camadas Bronze, Silver e Gold.
- Definir padrões técnicos e boas práticas de arquitetura, apoiando a governança e a qualidade dos dados.
- Trabalhar com áreas de negócio e tecnologia para transformar necessidades em soluções de dados.
🛠️ Requirements
- Experiência sólida com Databricks, Apache Spark, SQL avançado e Python.
- Conhecimento de Azure Data Factory, ADLS Gen2, ETL/ELT e Data Lakehouse.
- Experiência com Arquitetura Medalhão (Bronze, Silver e Gold) e modelagem dimensional.
- Vivência em engenharia e arquitetura de dados, migração de Data Lake, integração de sistemas e modernização de plataformas.
- Perfil colaborativo, boa comunicação e capacidade de liderar tecnicamente iniciativas e decisões de arquitetura.
- Conhecimento de Delta Lake, Unity Catalog, Azure DevOps, Terraform e CI/CD.
- Experiência com Power BI, governança de dados, FinOps, Analytics e BI corporativo.
Full job description
🚚 Transforme o transporte com a Motz!
Somos uma transportadora digital que conecta embarcadores e caminhoneiros de todo o Brasil, desburocratizando processos e gerando renda por meio da tecnologia. Desde 2020, contamos com a herança de estrutura e segurança da Votorantim Cimentos e já transportamos mais de 19 milhões de toneladas em mais de 700 mil viagens!
Especialistas em transporte para construção civil e agronegócio, buscamos pessoas corajosas, inovadoras e comprometidas com a segurança. Valorizamos o sentimento de empreendedorismo, a busca por soluções simples e inovadoras e, acima de tudo, o senso de integridade.
Curte um ambiente inovador, acelerado e acolhedor? Vem crescer com a gente! 🚀
#VemPraMotz
Responsibilities
E o seu dia a dia como será? 💼
- Desenvolver e evoluir a plataforma corporativa de dados, garantindo escalabilidade, qualidade e governança das informações.
- Construir e manter pipelines de dados utilizando Databricks e Azure Data Factory.
- Evoluir a arquitetura Data Lakehouse e as camadas Bronze, Silver e Gold.
- Definir padrões técnicos, boas práticas de arquitetura e apoiar a governança e qualidade dos dados.
- Atuar em parceria com as áreas de negócio e tecnologia, traduzindo necessidades em soluções de dados e apoiando a evolução da estratégia Data Driven da empresa.
Requirements
O que esperamos de você? 🎓
- Experiência sólida com Databricks, Apache Spark, SQL Avançado e Python.
- Conhecimento em Azure Data Factory, ADLS Gen2, ETL/ELT e Data Lakehouse.
- Experiência com Arquitetura Medalhão (Bronze, Silver e Gold) e modelagem dimensional.
- Vivência em projetos de engenharia e arquitetura de dados, incluindo migração de Data Lake, integração de sistemas e modernização de plataformas de dados.
- Perfil colaborativo, com boa comunicação e capacidade de liderar tecnicamente iniciativas e decisões de arquitetura.
⭐ Antes de qualquer coisa saiba que você irá se destacar super bem no nosso time, se:⭐
- Conhecimento em Delta Lake, Unity Catalog, Azure DevOps, Terraform e CI/CD.
- Experiência com Power BI, Data Governance e práticas de FinOps.
- Atuação em projetos de Analytics e BI corporativo, consolidação de múltiplas fontes de dados e iniciativas de melhoria da qualidade dos dados.
Similar jobs
Search more Data Engineer jobsSenior Data Engineer (Databricks) - Contractor - US
Build and optimize Databricks data platforms and pipelines across batch and streaming workloads, contribute technical leadership and solution accelerators, and help deliver scalable client data solutions.
Senior Engineer – Data Engineering (Databricks) - Contractor - India
Lead delivery of Databricks data engineering solutions, designing and optimizing scalable batch and streaming pipelines while contributing to data platform architecture and reusable solution accelerators.
Senior Data Engineer (Databricks) - Brazil
Lead Databricks data engineering work to design and implement scalable lakehouse platforms and batch and streaming pipelines, while contributing to solution architecture, data quality, and Databricks accelerators.
Design and maintain ETL/ELT pipelines, modernize legacy data systems and SAS workflows, and build reliable data integrations and database structures for analytical and operational use.
