Build and scale data pipelines, integrations, and models connecting product, customer, sales, and revenue data to power enterprise reporting, forecasting, customer intelligence, and GTM decisions.
ENGENHEIRO DE DADOS Sr - Consultor
📜 Description
- Desenvolver e manter arquitetura no Google Cloud para ingestão e transformação de dados.
- Entender necessidades das áreas, mapear dados e origens e definir seu fluxo pelas camadas do Data Lake.
- Criar modelos dimensionais e desenvolver, testar e validar pipelines de dados.
- Documentar requisitos de negócio e técnicos, processos e testes.
- Seguir diretrizes de governança, qualidade e privacidade de dados e trabalhar com metodologia ágil.
- Gerenciar engenheiros de dados terceirizados e, futuramente, internos.
🛠️ Requirements
- Ensino superior completo.
- Proficiência em BigQuery e conhecimento avançado de serviços Google Cloud, como Dataflow, Dataprep, Pub/Sub e Cloud Storage.
- Forte habilidade em Python e conhecimento de SQL para consultas complexas e preparação de dados.
- Experiência com arquitetura de dados distribuídos e escaláveis e implementação de pipelines robustos.
- Conhecimento de orquestração com Apache Airflow ou Cloud Composer.
- Conhecimento de segurança e conformidade de dados no Google Cloud e familiaridade com integração de pipelines a modelos de machine learning.
Full job description
Olá, somos a Cruzeiro do Sul Educacional! ⭐
Nós acreditamos no poder de transformação de vidas por meio da educação de qualidade e excelência! Aqui, nós buscamos conectar diferentes pessoas para que possam construir um mundo melhor a partir da educação, com muito trabalho, respeito e dedicação, proporcionando a melhor experiência e apoiando a jornada do conhecimento de mais de 500 mil alunos.
A Cruzeiro do Sul Educacional S/A é um dos maiores e mais representativos grupos de educação do país, tendo instituições de ensino academicamente relevantes e marcas reconhecidas em suas respectivas regiões, das suas escolas de ensino básico às instituições de ensino superior.
Docentes e colaboradores de diversas áreas trabalham em sintonia para garantir essa construção diária. E estamos sempre em busca de novas pessoas para colaborar com esse objetivo, sejam profissionais que procuram por uma primeira oportunidade no mercado de trabalho, até os mais experientes.
Você se identifica e acredita nesse propósito e quer trabalhar em uma de nossas marcas? Venha fazer parte do nosso time! Estamos de braços abertos para recebê-lo(a).
Para se candidatar a uma de nossas vagas, é importante manter todos os seus dados atualizados e completos. Fique à vontade para se cadastrar em todas as vagas disponíveis do seu interesse, apenas recomendamos que você finalize um processo antes de iniciar um novo.
Responsibilities
MISSÃO DO CARGO:
Desenvolver e manter sistemas de dados altamente eficientes e escaláveis no Google Cloud Platform, capacitando a empresa a tomar decisões estratégicas baseadas em dados precisos, confiáveis e oportunos, enquanto impulsiona a inovação e o crescimento sustentável.
PRINCIPAIS ATRIBUIÇÕES / RESPONSABILIDADES:
- Desenvolver e manter uma arquitetura em ambiente Google Cloud para ingestão e transformação de dados
- Entender o problema e/ou a necessidade das áreas demandantes.
- Mapear os dados necessários e suas respectivas origens.
- Mapear a movimentação dos dados pelas camadas do Data Lake e as transformações necessárias.
- Criar modelos dimensionais para o relacionamento de dados.
- Desenvolver pipelines de dados.
- Testar os pipelines desenvolvidos e garantir a correta entrega do dado.
- Documentar todo o processo, desde requisito de negócio, técnico, testes.
- Seguir as diretrizes de governança de dados definidas (qualidade de dados, privacidade e etc)
- Conhecimento em dataops
- Trabalhar dentro de metodologia ágil focando no trabalho em equipe
- Gerenciar o time de engenheiro de dados terceiros e futuramente internos
Desejável:
-Conhecimentos avançados em SQL para exploração, tratamento e preparação de dados
-Construção de Dashboards Analíticos ( Tableau, Power BI, Google Data Studio )
Diferenciais:
-Conhecimentos de ‘infrastructure as a code’ (p. ex. Terraform)
-Certificações profissionais do tipo de dados (engenharia de dados)
-Experiência em ambientes Big Data e Advanced Analytics, nas ferramentas Apache (Spark, Airflow, Beam, Hadoop, Hive, etc)
COMPETÊNCIAS TÉCNICAS OU DE PROCESSOS
- Proficiência em BigQuery para consultas e manipulação de dados em larga escala.
- Conhecimento avançado de serviços como Google Dataflow, Google Dataprep, Google Pub/Sub, Google Cloud Storage, entre outros.
- Forte habilidade em Python para desenvolvimento de scripts e pipelines de dados.
- Conhecimento em SQL para consultas complexas em BigQuery e outras fontes de dados.
- Compreensão profunda de arquiteturas de dados distribuídos e escaláveis.
- Experiência em design e implementação de pipelines de dados robustos e eficientes.
- Experiência em ferramentas de orquestração como Apache Airflow ou Cloud Composer para gerenciar pipelines de dados.
- Conhecimento em práticas de segurança de dados e conformidade, especialmente dentro do ambiente do Google Cloud Platform.
- Familiaridade com conceitos de machine learning e experiência em integrar pipelines de dados com modelos de ML para produção.
Requirements
Escolaridade: SUPERIOR COMPLETO
Similar jobs
Search more Data Engineer jobsOwn data engineering and hands-on migrations, building secure, scalable pipelines and platform foundations that bring law firms’ data together and power analytics and AI product improvements.
Desenvolve e mantém pipelines de dados em AWS, Databricks e Cloudera, otimiza processamento distribuído com Spark e apoia áreas de negócio na implementação de soluções de dados.
Design the semantic layer, mobility-domain ontologies, and text-to-SQL agents that help analysts and AI systems query an AWS data platform reliably, while setting agent-ready data standards and mentoring engineers.
Own the design, delivery, and reliability of complex data pipelines and models across Azure and Snowflake, enabling trusted data for business decisions while setting engineering standards and mentoring colleagues.
