The Data Engineer will design and maintain scalable ETL/ELT pipelines on the Databricks Lakehouse Platform, integrating data from various sources and ensuring data quality.
CAS | Engenharia de Dados - Asset
📜 Description
- Atuar em projetos estruturantes de migração, integração, automação e melhoria de processos
- Projetar, implementar e sustentar pipelines de dados conectando OMS/EMS, sistemas de risco/performance, plataformas internas, custodiantes, administradores
- Construir pipelines de dados capazes de identificar oportunidades de negócio a partir de dados internos e externos
- Construir e manter ETLs/ELTs de alta confiabilidade e performance
- Desenvolver integrações via APIs, SFTP, mensageria ou conectores proprietários
- Documentar processos, fluxos de dados e soluções técnicas para referência futura, garantindo que nosso conhecimento seja compartilhado e preservado
🛠️ Requirements
- Formação: Engenharias, Sistemas de Informação, Ciência da Computação, Matemática, Estatística, ou afins;
- Experiência com engenharia de dados no mercado financeiro;
- Conhecimentos sólidos em Databricks;
- Experiência em otimização de ETLs e configuração de clusters;
- Domínio em SQL e Python para manipulação e automação de dados;
- Conhecimento avançado de conceitos de modelagem de dados, arquitetura de dados e IA;
- Habilidades analíticas e capacidade de resolver problemas complexos relacionados a dados e sistemas de tecnologia;
- Boas habilidades de comunicação e capacidade de trabalhar em equipe, pois você estará colaborando com diferentes partes interessadas.
Full job description
Buscamos uma pessoa Engenheira de Dados para atuar na Asset do Sicredi, será responsável por projetar, construir e manter arquiteturas de dados robustas com foco em otimização e escalabilidade que suportem as rotinas críticas e o crescimento de uma gestora de recursos incluindo processos de gestão, pesquisa, middle office, risco, performance e monitoramento de portfólio.
Você ajudará a evoluir os padrões e boas práticas dentro do time, apoiará decisões estratégicas de engenharia e garantirá a qualidade, governança, segurança e confiabilidade dos dados em todo o ciclo. Também colaborará com diferentes áreas para transformar necessidades de negócio em soluções eficientes.
Responsibilities
- Atuar em projetos estruturantes de migração, integração, automação e melhoria de processos
- Projetar, implementar e sustentar pipelines de dados conectando OMS/EMS, sistemas de risco/performance, plataformas internas, custodiantes, administradores
- Construir pipelines de dados capazes de identificar oportunidades de negócio a partir de dados internos e externos
- Construir e manter ETLs/ELTs de alta confiabilidade e performance
- Desenvolver integrações via APIs, SFTP, mensageria ou conectores proprietários
- Documentar processos, fluxos de dados e soluções técnicas para referência futura, garantindo que nosso conhecimento seja compartilhado e preservado
- Trabalhar em conjunto com analistas de negócio para definir regras de cálculo, granularidade, qualidade e campos-chave
- Identificar e implementar melhorias contínuas com foco em eficiência, performance, governança e custos, entregando valor para o negócio.
Requirements
- Formação: Engenharias, Sistemas de Informação, Ciência da Computação, Matemática, Estatística, ou afins;
- Experiência com engenharia de dados no mercado financeiro;
- Conhecimentos sólidos em Databricks;
- Experiência em otimização de ETLs e configuração de clusters;
- Domínio em SQL e Python para manipulação e automação de dados;
- Conhecimento avançado de conceitos de modelagem de dados, arquitetura de dados e IA;
- Habilidades analíticas e capacidade de resolver problemas complexos relacionados a dados e sistemas de tecnologia;
- Boas habilidades de comunicação e capacidade de trabalhar em equipe, pois você estará colaborando com diferentes partes interessadas.
Similar jobs
Search more Data Engineer jobsAs a Forward Deployed Engineer, you will deploy and optimize data pipelines, manage cloud infrastructure, and leverage AI tools to enhance engineering productivity.
Join the Data Foundations team to build and enhance asynchronous data services, ensuring reliable data synchronization across Box's systems and evolving the data infrastructure.
As a Data Engineer, you will develop data integration solutions and contribute to the architecture of software products for real-time processing in the vehicle-to-cloud ecosystem.
People Data Engineer - 100% Remote Job.
The People Data & AI Readiness Engineer is responsible for building and maintaining the data architecture that supports people analytics and AI solutions, ensuring data quality and governance.
