Design and optimize scalable data pipelines and cloud-native architectures that support Data & AI initiatives, collaborating across teams to deliver secure, high-performing data solutions.
Data Developer (Azure/Databricks) Sênior , Brazil
📜 Description
- Desenvolver e manter pipelines ETL/ELT em Azure e Databricks.
- Implementar CI/CD e versionamento de código com GitHub.
- Modelar e evoluir tabelas no Unity Catalog, seguindo padrões de nomenclatura e versionamento de schema.
- Projetar e otimizar modelos de dados com foco em escalabilidade, performance e governança.
- Apoiar migrações para cloud e colaborar no deploy de modelos de IA em ambiente cloud.
- Monitorar qualidade e consistência dos dados e documentar processos, arquiteturas e boas práticas.
🛠️ Requirements
- Experiência sólida com Azure Data Services e Databricks, incluindo PySpark.
- Domínio de Python e SQL e experiência com ETL/ELT e integração de grandes volumes de dados.
- Experiência com arquitetura medalhão, modelagem de dados analíticos e migração para cloud.
- Conhecimento de CI/CD e versionamento com GitHub.
- Experiência com deploy de modelos de IA e ferramentas como Azure ML.
- Diferenciais: governança de dados, contexto financeiro, MDM, MLflow, Data Lake e Data Warehouse.
Full job description
Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.
Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.
Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.
Similar jobs
Search more Data Engineer jobsDesign and deliver AI-ready data platforms, pipelines, and semantic layers for client engagements, translating business needs into scalable analytics solutions and supporting AI-enabled workflows from design through production.
Design end-to-end analytical data solutions for client engagements, building cloud data platforms and production pipelines while advising stakeholders and supporting the deployment of data science and ML projects.
Engenheiro de Dados Sênior (AWS - PySpark - Kafka)
Projeta e opera plataformas de dados orientadas a eventos na AWS, desenvolvendo pipelines Kafka e PySpark, definindo arquitetura e garantindo performance, rastreabilidade e confiabilidade em ambiente financeiro regulado.
Drive Databricks adoption and technical standards while designing and optimizing scalable data pipelines, strengthening governance and observability, and guiding engineers across data engineering initiatives.
