Projeta, desenvolve e mantém plataformas de dados corporativos, pipelines ETL/ELT e ferramentas de qualidade de dados para viabilizar insights sobre clientes e processar grandes volumes de informação.
Pessoa Engenheira de Dados Pleno
📜 Description
- Desenvolver pipelines de dados de ponta a ponta e contribuir para a criação de uma plataforma de dados.
- Definir testes automatizados e otimizar o desempenho de processamento e armazenamento.
- Implementar observabilidade e monitoramento, além de investigar incidentes complexos.
- Contribuir para decisões sobre arquitetura, armazenamento, integrações e escalabilidade.
- Implementar ingestão de dados em lote e streaming.
- Apoiar profissionais juniores e acompanhar a segurança, governança e alertas dos pipelines.
🛠️ Requirements
- Ensino Superior completo em Análise e Desenvolvimento de Sistemas, Ciência da Computação, Engenharia da Computação ou áreas correlatas;
- SQL a nível avançado;
- Python a nível avançado;
- Experiência prática com engenharia de dados;
- Experiência com integrações (banco de dados, APIs, SFTP);
- Experiência com ferramentas de orquestração (preferencialmente Airflow);
- Experiência com ferramentas Git (preferencialmente GitFlow);
- Experiência com Terraform;
- Experiência em ambientes Cloud (AWS, Azure ou GCP)
- Experiência com troubleshooting (preferencialmente Logging), alertas monitoramento de pipelines;
Full job description
Estamos em busca de uma Pessoa Engenheira de Dados Pleno para transformar desafios complexos em soluções robustas, atuando na criação de pipelines de ponta a ponta e participando da definição de arquiteturas que impulsionem a eficiência e a confiabilidade dos nossos dados.
Responsibilities
🎯Quais serão suas principais atividades?
- Participar ativamente da criação de uma plataforma de dados, desenvolvimento pipelines de ponta a ponta;
- Definir testes automatizados para dados, otimizando performance de processamento e armazenamento;
- Implementar práticas de observabilidade e monitoramento, realizando troubleshooting de incidentes complexos;
- Participar das decisões relacionadas à arquitetura de dados, modelos de armazenamento, integrações e escalabilidade da plataforma;
- Implementar processos de ingestão em lote e streaming;
- Apoiar profissionais juniores;
- Garantir aderência às políticas de segurança e governança, interpretando alertas e monitorando pipelines.
Requirements
🔍Requisitos:
- Ensino Superior completo em Análise e Desenvolvimento de Sistemas, Ciência da Computação, Engenharia da Computação ou áreas correlatas;
- SQL a nível avançado;
- Python a nível avançado;
- Experiência prática com engenharia de dados;
- Experiência com integrações (banco de dados, APIs, SFTP);
- Experiência com ferramentas de orquestração (preferencialmente Airflow);
- Experiência com ferramentas Git (preferencialmente GitFlow);
- Experiência com Terraform;
- Experiência em ambientes Cloud (AWS, Azure ou GCP)
- Experiência com troubleshooting (preferencialmente Logging), alertas monitoramento de pipelines;
- Conceitos em DataOps, CI/CD e modelagem.
✨Diferenciais:
- Experiência com PySpark;
- Experiência com testes automatizados;
- Participação em projetos de estruturação de plataforma de dados;
- Experiência anterior em empresas de tecnologia ou segmento financeiro.
Similar jobs
Search more Data Engineer jobsConsultant -- Azure, Data & AI
Design and deliver Azure data and AI solutions for clients, building scalable data pipelines, integrating AI services, and enabling advanced analytics while supporting secure, well-governed architectures.
Own and improve credit bureau reporting pipelines and operations, tracing account-data discrepancies, resolving disputes and defects, and ensuring accurate, complete, and timely reporting through tested workflows.
Own and improve credit bureau reporting pipelines and operations, investigating account-level discrepancies, resolving disputes, and ensuring customer data is accurate, complete, and timely.
Own and improve credit bureau reporting data pipelines, from preparation and validation through reconciliation, while investigating discrepancies and partnering across teams to ensure accurate reporting.
