Engenheiro (a) de Dados Sênior

Porto; Botucatu; Hybrid; BRL 180,000 - 300,000; Full time

Benefits offered by this job

Vale alimentação

Plano de saúde

Plano odontológico

PLR

Programa de ações Porto em Ação

Auxílio transporte

Licença parental extendida

Job summary

A Porto está buscando um Especialista em Engenharia de Dados para projetar, construir e sustentar pipelines de dados críticos. Você atuará como referência técnica, desenhará arquiteturas E2E e garantirá a qualidade e a disponibilidade dos dados para BI, Analytics e ML em um ambiente híbrido.

O profissional deve dominar Python, SQL e ferramentas como Airflow, Spark e DBT, além de experiência em modelagem de dados e governança. Espera-se atuação colaborativa com times de TI, FinOps e operações.

Qualifications

• Graduação completa em Ciência da Computação, Engenharia da Computação, Sistemas de Informação ou áreas correlatas.
• Experiência prática em engenharia de dados, pipelines e governança de dados.
• Conhecimento sólido de Cloud e ecossistema de dados (GCP é desejável).

Responsibilities

• Atuar como referência técnica de Engenharia de Dados e disseminar boas práticas.
• Desenhar e manter arquiteturas de dados de ponta a ponta de batch e streaming.
• Contribuir para a visão 360 de dados e traduzir requisitos de negócio em soluções técnicas.
• Alinhar soluções com áreas de TI e governança.
• Realizar modelagem de dados, otimização e alta performance de pipelines.
• Otimizar custos na nuvem e gerenciar fornecedores e qualidade.

Skills

Python

SQL

Airflow

Spark

Data Modeling

DataOps

Git

CI/CD

Education

Graduação completa em Ciência da Computação ou áreas correlatas

Tools

BigQuery

Dataflow

Dataproc

dbt

Airflow

Job description

Job description

A Engenharia de Dados é uma área corporativa responsável por construir, gerenciar e disponibilizar produtos de dados com qualidade para fins analíticos. Trata-se de uma área estratégica da TI, que habilita o trabalho com dados com abordagem transversal.

Main responsibilities

• Referência Técnica: Atuar como referência técnica de Engenharia de Dados, orientando times, disseminando boas práticas e impulsionando a evolução tecnológica.
• Arquitetura e Design E2E: Desenhar, construir e manter arquiteturas resilientes e fluxos de integração (batch e streaming), garantindo a confiabilidade do dado da origem ao destino.
• Visão Holística e de Negócio: Prover visão 360 no contexto de dados, traduzindo requisitos de negócio em arquiteturas técnicas de alto impacto e mitigações de riscos.
• Alinhamento Institucional: Alinhar soluções com as áreas corporativas de TI (Arquitetura, Segurança da Informação, FinOps, Operações/DevOps), garantindo conformidade e governança.
• Modelagem e Otimização: Realizar estudos de impacto em modelos compartilhados, evitando redundâncias, garantindo alta performance e zelando pela integridade da informação.
• Gestão Financeira Cloud (FinOps): Acompanhar e otimizar custos computacionais e de armazenamento em nuvem, garantindo eficiência orçamentária dos projetos.
• Gestão de Fornecedores e Qualidade: Direcionar a atuação de Fábricas de Software/Fornecedores, garantindo o cumprimento de prazos, padrões de arquitetura e qualidade dos entregáveis.
• Gestão de Mudanças e Estabilidade: Coordenar procedimentos de Gestão de Mudanças (GMUD), monitorar a estabilidade, performance e aplicar medidas preventivas e corretivas.
• Exposição de Dados e APIs: Desenvolver e manter interfaces (APIs, conectores e camadas semânticas) para consumo seguro de dados por sistemas de BI, Analytics e Machine Learning.
• Sustentação e Operação de Soluções Críticas: Assegurar a estabilidade, performance e observabilidade dos pipelines em produção, atuando prontamente no diagnóstico e resolução de incidentes críticos para garantir os SLAs acordados com o negócio.
• Disponibilidade e Resposta a Incidentes: Atuar em intervenções pontuais de manutenção ou resolução de incidentes excepcionalmente fora do horário comercial.

Requirements and skills

• Formação Acadêmica: Graduação completa em Ciência da Computação, Engenharia da Computação, Sistemas de Informação, Análise de Sistemas ou áreas correlatas de TI.
• Arquitetura Cloud (GCP): Domínio comprovado do ecossistema de dados na Google Cloud Platform (BigQuery, Cloud Storage, Dataflow, Cloud Composer/Airflow, Pub/Sub e Dataproc).
• Linguagens e Manipulação de Dados: Forte experiência e fluência em Python e SQL Avançado para construção, otimização e manutenção de pipelines de dados complexos.
• Processamento Distribuído: Vivência prática em processamento de dados em lote (batch) e tempo real (streaming) utilizando Apache Spark (PySpark) ou frameworks equivalentes.
• Modelagem de Dados: Domínio em modelagem de dados (Dimensional, Star Schema, Snowflake, Medallion Architecture / Lakehouse) e conceitos estruturais de Data Warehouses e Data Lakes.
• Orquestração e Qualidade: Experiência prática na criação de DAGs/pipelines com Apache Airflow e implementação de testes automatizados e regras de qualidade de dados.
• Entrega E2E (Ponta a Ponta): Experiência completa no ciclo de vida de produtos de dados, desde o levantamento e especificação de requisitos junto às áreas de negócio até a implantação, observabilidade e sustentação em produção.
• Versionamento e DataOps: Conhecimento prático em Git, controle de versão e conceitos de integração/entrega contínua (CI/CD / DataOps).

Será legal também se você tiver:

• Especialização: Pós-graduação, MBA ou Especialização em Engenharia de Dados, Arquitetura de Dados, Big Data ou Cloud Computing.
• Ecossistema Multi-Cloud: Experiência prática ou conhecimento nas plataformas Microsoft Azure (Synapse, Data Factory, Databricks) e/ou Oracle Cloud Infrastructure (OCI).
• Transformação Moderna de Dados: Experiência com a ferramenta dbt (data build tool) para transformação, modelagem e documentação na camada de Analytics.
• Infraestrutura como Código (IaC): Conhecimento em provisionamento e automação de infraestrutura utilizando Terraform.
• Certificações Oficiais: Certificações ativas de nuvem, tais como GCP Professional Data Engineer ou Azure Data Engineer Associate.
• Metodologias Ágeis: Vivência prática de trabalho em ambientes ágeis (Scrum / Kanban).

Additional information

• Vale Alimentação e Refeição Flexíveis;
• Plano de Saúde;
• Plano Odontológico e Odontox;
• Wellhub e TotalPass;
• Academia Bio Ritmo exclusiva para Colaboradores: no Complexo Matriz;
• Participação nos Lucros - PLR;
• Programa de Ações: Porto em Ação: complementar à PLR até 2030;
• Quadras de Areia e Poliesportiva: no Complexo Matriz;
• Estúdio de Música;
• Vale-Transporte;
• Serviços de Transporte de Vans; disponibilizadas nas principais estações de acesso à Porto (Luz, Barra Funda, Santa Cecília e Júlio Prestes);
• Licença Parental Estendida: até 40 dias para todas as configurações familiares;
• Licença Maternidade Estendida de 6 meses.;
• Ambulatório Médico com Especialidades: no Complexo Matriz e Barra Funda;
• Auxílio creche ou babá;
• Seguro de Vida;
• Previdência Privada - PortoPrev;
• Desconto em Produtos e Serviços;
• Bolsa de estudos: Reembolso para graduação, pós ou MBA;
• Corridas mensais: subsídio para as principais corridas de ruas de São Paulo
• Reembolso para idiomas (inglês ou espanhol);
• Teatro Porto: sessões exclusivas para Colaboradores;
• Biblioteca;
• Sala de descanso: no completo Matriz
• Salão de jogos: no complexo Matriz
• Serviços de massagem e podologia: no completo Matriz
• Local de trabalho: Campos Elíseos (Atuamos com modelos híbridos, que serão explorados no processo seletivo);