Design and optimize scalable data pipelines and cloud-native architectures that support Data & AI initiatives, collaborating across teams to deliver secure, high-performing data solutions.
Data Developer (Azure/Databricks) Sênior , Brazil
📜 Description
- Desenvolver e manter pipelines ETL/ELT em Azure e Databricks.
- Implementar CI/CD e versionamento de código com GitHub.
- Modelar e evoluir tabelas no Unity Catalog e otimizar modelos de dados.
- Apoiar migrações para cloud, assegurando segurança, qualidade e integridade dos dados.
- Colaborar com equipes de negócio e ciência de dados no deploy de modelos de IA em cloud.
- Monitorar qualidade e consistência dos dados e documentar processos e arquiteturas.
🛠️ Requirements
- Experiência sólida com Azure Data Services e Databricks, incluindo PySpark.
- Domínio de Python e SQL e experiência com ETL/ELT e grandes volumes de dados.
- Experiência com arquitetura medalhão, modelagem analítica, CI/CD e GitHub.
- Vivência em migração para cloud e deploy de modelos de IA, incluindo Azure ML.
Full job description
Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions.
Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy.
Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias.
Similar jobs
Search more Data Engineer jobsDesign and deliver AI-ready data platforms, pipelines, and semantic layers for client engagements, translating business needs into scalable analytics solutions and supporting AI-enabled workflows from design through production.
Design end-to-end analytical data solutions for client engagements, building cloud data platforms and production pipelines while advising stakeholders and supporting the deployment of data science and ML projects.
Engenheiro de Dados Sênior (AWS - PySpark - Kafka)
Projeta e opera plataformas de dados orientadas a eventos na AWS, desenvolvendo pipelines Kafka e PySpark, definindo arquitetura e garantindo performance, rastreabilidade e confiabilidade em ambiente financeiro regulado.
Drive Databricks adoption and technical standards while designing and optimizing scalable data pipelines, strengthening governance and observability, and guiding engineers across data engineering initiatives.
