Job description
A área de engenharia de dados é deve garantir que a organização tenha acesso a dados confiáveis e organizados, possibilitando a criação de insights e a tomada de decisões estratégicas e operacionais. Ser um agente de transformação, construindo uma plataforma escalável e resiliente, democratizar o acesso aos dados e impulsionar uma cultura orientada por dados. Missão da Vaga: Projetar, construir e manter pipelines robustos de dados, garantindo que as informações fluam de maneira eficiente e segura. Garantir a disponibilidade, qualidade e governança dos dados. Trabalhar em estreita colaboração com stakeholders e time visando promover melhores práticas na manipulação, análise de grandes volumes de dados otimização de processos.
Main responsibilities
- Projetar, construir e manter pipelines de dados robustos e escaláveis para ingestão, processamento e transformação de grandes volumes de dados. Desenvolver e otimizar modelos de dados para sistemas analíticos.
- Implementar e gerenciar soluções de armazenamento, incluindo data lakes e data warehouses, em ambientes em nuvem.
- Garantir a integridade, qualidade e governança dos dados, aplicando boas práticas de gerenciamento e segurança e FINOPS.
- Colaborar com equipes multidisciplinares para entender requisitos de negócio e oferecer soluções orientadas por dados.
- Monitorar e otimizar o desempenho de pipelines, bases de dados e soluções de integração.
- Liderar iniciativas de modernização de arquitetura de dados, utilizando tecnologias de ponta e frameworks modernos.
- Atuar como referência técnica e mentorar engenheiros de dados juniores e plenos.
Requirements and skills
- Graduação em Ciência da Computação, Engenharia de Software, Sistemas de Informação ou áreas relacionadas.
- Experiência com engenharia de dados ou funções similares.
- Experiência comprovada com plataformas de data viz (tableau, power bi e/ou looker).
- Histórico de liderança ou participação ativa em projetos complexos de integração e migração para nuvem.
- Cloud Computing;
- Experiência em GCP e seus serviços, BigQuery, Cloud Composer, Apache Airflow, Dataflow, Pub/Sub, Cloud Run, Cloud Function, KMS, Secret Manager, DataStream, Vertex AI e GitHub;
- Experiência em Azure e seus serviços, como Azure Data Factory, Azure Synapse Analytics e Azure Data Lake Storage;
- Banco de Dados: Conhecimento em modelagem de dados, bancos de dados relacionais (ex.: Oracle, SQL Server, PostgreSQL) e não relacionais (ex.: MongoDB, Cassandra).
- Linguagens de Programação: Proficiência em Python e Pyspark (usado para scripts e automação) e SQL (para manipulação e consulta de dados).
- ETL/ELT: Experiência na construção de pipelines de ETL/ELT para ingestão e transformação de dados.
- Data Lakes: Conhecimento de arquiteturas de Data Lake, armazenamento e otimização de dados (ex.: Delta Lake);
- DevOps: Experiência com pipelines de CI/CD e práticas de DataOps para automação de deploys e monitoramento de fluxos de dados;
- Segurança e Governança: Entendimento de práticas de segurança em nuvem, criptografia de dados e implementação de políticas de governança;
- Orquestração de Dados: Uso de ferramentas como Azure Data Factory e/ou Synapse e/ou Airflow/composer para integração e movimentação de dados.
- Desempenho e Otimização: Experiência em técnicas para melhorar a performance de pipelines de dados e consultas em ambientes distribuídos e não distribuídos.
- APIs: Conhecimento em extração de dados via APIs RESTful.
Diferenciais: Certificações de engenharia de dados nas plataformas GCP e/ou Azure (Professional Data Engineer, Azure Data Engineer Associate).
Competências Necessárias
Técnicas:
- Capacidade de projetar arquiteturas de dados escaláveis e resilientes.
- Domínio de metodologias ágeis e DevOps para integração e entrega contínuas.
- Forte habilidade de solucionar problemas complexos de dados com eficiência e criatividade.
Comportamentais:
- Pensamento analítico e orientado a resultados.
- Excelente comunicação para traduzir necessidades técnicas e de negócio.
- Proatividade e senso de urgência para atender demandas críticas.
- Capacidade de trabalho em equipe e liderança colaborativa.
- Compromisso com a aprendizagem contínua e atualização tecnológica.
Additional information
E tem mais, confira o nosso pacote de benefícios:
- Plano de Saúde e Odontológico – Bradesco – extensivo a dependentes
- PAE - Auxílio financeiro oferecido no caso de dependentes filhos(as) e/ou enteados(as) com deficiência intelectual
- Convênio Farmácia. Descontos de até 85%
- Previdência Complementar – Plano FlexPrev - variando de 1% a 11%, de acordo com o salário
- Seguro de Vida – seguro para todos os colaboradores a partir da data de admissão, sem participação.
- Extensão das Licenças - Maternidade (180 dias) e Paternidade (20 dias).
- Vale-Alimentação e/ou Refeição – Caju Benefícios
- Auxílio-Educacional - Para dependentes até o ensino médio.
- TotalPass
- Assinatura Solar - Desconto na conta de energia a partir da adesão a um plano de geração distribuída.
- Clube Smiles Corporativo - Descontos de até 50% nos planos oferecidos para você planejar suas viagens. Disponível também para cônjuge e filhos 18+.
- Adicional por tempo de serviço – Adicional de salário conforme tempo de casa.
E para o desenvolvimento de nossas equipes...
- Plataforma de Aprendizagem: Trilha dos valores vibra e curadoria renomada com mais de 200 opções de cursos disponíveis para acesso a qualquer tempo.
- Recrutamento Interno: Divulgação das vagas disponíveis em todo Brasil, incentivando a mobilidade interna.