ENGENHEIRO DE DADOS Sr

Cruzeiro do Sul Educacional; São Paulo; Presencial; BRL 120 000 - 190 000; Tempo integral

Resumo da oferta

A Cruzeiro do Sul Educacional está recrutando um Engenheiro de Dados para desenvolver e manter sistemas de dados eficientes e escaláveis no Google Cloud Platform, capacitando a empresa a decisões baseadas em dados de alta qualidade.

O profissional irá mapear fontes de dados, criar pipelines, modelos dimensionais e dashboards, atuando com governança de dados, pipelines de dados e integração com modelos de ML.

Qualificações

• Superior completo.
• Conhecimentos avançados em SQL para exploração, tratamento e preparação de dados.
• Construção de Dashboards Analíticos (Tableau, Power BI, Google Data Studio).
• Conhecimentos em BigQuery, Dataflow, Pub/Sub, Cloud Storage e demais serviços GCP.
• Forte habilidade em Python para desenvolvimento de scripts e pipelines de dados.
• Conhecimento em arquiteturas de dados distribuídos e pipelines robustos.
• Experiência com ferramentas de orquestração como Airflow/Cloud Composer.
• Práticas de segurança de dados e conformidade no Google Cloud.
• Familiaridade com conceitos de ML para integração com pipelines de dados.

Responsabilidades

• Desenvolver e manter arquitetura em Google Cloud para ingestão e transformação de dados.
• Mapear dados necessários e suas origens, bem como o fluxo pelos layers do Data Lake.
• Criar modelos dimensionais para relacionar dados e desenvolver pipelines de dados.
• Testar pipelines e garantir entrega correta dos dados.
• Documentar requisitos de negócio, técnico e testes, seguindo governança de dados.
• Gerenciar equipe de engenheiro de dados, internos e terceiros, em metodologia ágil.

Conhecimentos

BigQuery

Python

SQL

GCP

Data pipelines

Airflow

Data governance

Agile

Formação académica

Superior completo

Ferramentas

Tableau

Power BI

Google Data Studio

Terraform

Cloud Composer

Descrição da oferta de emprego

Job description

Olá, somos a Cruzeiro do Sul Educacional!

Nós acreditamos no poder de transformação de vidas por meio da educação de qualidade e excelência!Aqui, nós buscamos conectar diferentes pessoas para que possam construir um mundo melhor a partir da educação, com muito trabalho, respeito e dedicação, proporcionando a melhor experiência e apoiando a jornada do conhecimento de mais de 500 mil alunos.

A Cruzeiro do Sul Educacional S/A éum dos maiores e mais representativos grupos de educação do país, tendo instituições de ensino academicamente relevantes e marcas reconhecidas em suas respectivas regiões, das suas escolas de ensino básico às instituições de ensino superior.

Docentes e colaboradores de diversas áreas trabalham em sintonia para garantir essa construção diária. E estamos sempre em busca de novas pessoas para colaborar com esse objetivo, sejam profissionais que procuram por uma primeira oportunidade no mercado de trabalho, até os mais experientes.

Você se identifica e acredita nesse propósito e quer trabalhar em uma de nossas marcas?Venha fazer parte do nosso time!Estamos de braços abertos para recebê-lo(a).

Para se candidatar a uma de nossas vagas, é importante manter todos os seus dados atualizados e completos. Fique à vontade para se cadastrar em todas as vagas disponíveis do seu interesse, apenas recomendamos que você finalize um processo antes de iniciar um novo.

Main responsibilities

MISSÃO DO CARGO:

Desenvolver e manter sistemas de dados altamente eficientes e escaláveis no Google Cloud Platform, capacitando a empresa a tomar decisões estratégicas baseadas em dados precisos, confiáveis e oportunos, enquanto impulsiona a inovação e o crescimento sustentável.

PRINCIPAIS ATRIBUIÇÕES / RESPONSABILIDADES:

• Desenvolver e manter uma arquitetura em ambiente Google Cloud para ingestão e transformação de dados
• Entender o problema e/ou a necessidade das áreas demandantes.
• Mapear os dados necessários e suas respectivas origens.
• Mapear a movimentação dos dados pelas camadas do Data Lake e as transformações necessárias.
• Criar modelos dimensionais para o relacionamento de dados.
• Desenvolver pipelines de dados.
• Testar os pipelines desenvolvidos e garantir a correta entrega do dado.
• Documentar todo o processo, desde requisito de negócio, técnico, testes.
• Seguir as diretrizes de governança de dados definidas (qualidade de dados, privacidade e etc)
• Conhecimento em dataops
• Trabalhar dentro de metodologia ágil focando no trabalho em equipe
• Gerenciar o time de engenheiro de dados terceiros e futuramente internos

Desejável:

• Conhecimentos avançados em SQL para exploração, tratamento e preparação de dados
• Construção de Dashboards Analíticos ( Tableau, Power BI, Google Data Studio )

Diferenciais:

• Conhecimentos de ‘infrastructure as a code’ (p. ex. Terraform)
• Certificações profissionais do tipo de dados (engenharia de dados)
• Experiência em ambientes Big Data e Advanced Analytics, nas ferramentas Apache (Spark, Airflow, Beam, Hadoop, Hive, etc)

COMPETÊNCIAS TÉCNICAS OU DE PROCESSOS

• Proficiência em BigQuery para consultas e manipulação de dados em larga escala.
• Conhecimento avançado de serviços como Google Dataflow, Google Dataprep, Google Pub/Sub, Google Cloud Storage, entre outros.
• Forte habilidade em Python para desenvolvimento de scripts e pipelines de dados.
• Conhecimento em SQL para consultas complexas em BigQuery e outras fontes de dados.
• Compreensão profunda de arquiteturas de dados distribuídos e escaláveis.
• Experiência em design e implementação de pipelines de dados robustos e eficientes.
• Experiência em ferramentas de orquestração como Apache Airflow ou Cloud Composer para gerenciar pipelines de dados.
• Conhecimento em práticas de segurança de dados e conformidade, especialmente dentro do ambiente do Google Cloud Platform.
• Familiaridade com conceitos de machine learning e experiência em integrar pipelines de dados com modelos de ML para produção.

Requirements and skills

Escolaridade: SUPERIOR COMPLETO

Additional information

Horário de trabalho:

09h às 19h (Seg à Qui) 09h às 18h (Sex) 220h