Engenheiro de Dados Senior

ESCALE; Brasil; Presencial; BRL 200.000 - 250.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia procura um engenheiro de software para atuar em São Paulo. Você será responsável por garantir a manutenção e evolução dos pipelines de dados, além de metrificar e monitorar a qualidade dos dados. É necessária experiência em Python, Java, Cloud e processamento distribuído. A empresa promove um ambiente dinâmico com oportunidades de crescimento e inovação.

Qualificações

• Experiência com engenharia de software (Python, Java, Scala, Clean Architecture, TDD).
• Experiência em tecnologia de processamento distribuído (Spark, Hive, Presto).
• Experiência com Cloud (AWS, GCP ou Azure).
• Infraestrutura como código (Terraform, Ansible, Puppet).
• Conhecimento em orquestradores de recursos, containers (Docker, Kubernetes).

Responsabilidades

• Garantir a manutenção e evolução dos pipelines de dados.
• Metrificar e monitorar sistemas focando em qualidade e consistência dos dados.
• Definir ferramentas para suporte ao gerenciamento de pipeline de dados self-service.
• Usar tecnologia Big Data para melhorar o desempenho do processamento de dados.
• Desenhar e desenvolver a plataforma de dados.

Conhecimentos

Engenharia de software - Python

Engenharia de software - Java

Engenharia de software - Scala

Clean Architecture

TDD

Processamento distribuído - Spark

Processamento distribuído - Hive

Processamento distribuído - Presto

Cloud - AWS

Cloud - GCP

Cloud - Azure

Infraestrutura como código - Terraform

Infraestrutura como código - Ansible

Infraestrutura como código - Puppet

Containers - Docker

Containers - Kubernetes

Descrição da oferta de emprego

Job description

Hey! Somos a Escale;)

Uma scale-up de tecnologia que leva as maiores marcas de serviços essenciais ao futuro da aquisição digital. Como? Vem que a gente te conta:

Com a nossa cultura Data-Driven e tecnologia própria, nós potencializamos a aquisição de clientes de grandes marcas e facilitamos a jornada de compra de milhões de consumidores.

As maiores marcas de serviços essenciais do Brasil estão com a gente e já recebemos mais de R$ 200 milhões de investidores world-class, além de sermos por 2 vezes uma das “100 startups to watch” e eleita a segunda empresa mais amada pelo Love Mondays.

Nosso propósito aqui é despertar o potencial máximo de pessoas e organizações e para isso buscamos pessoas que, assim como nós, estejam sempre em busca de ser a sua melhor versão e desafiar os seus limites.

Você será responsável pela Definição de indicadores chave (conversões, micro-conversões) e suas metas, em colaboração com as áreas de negócio,para acompanhamento de resultados e plano de ação quando necessário;

Criar hipóteses de testes A/B, supervisão dos testes e garantir a assertividade estatística dos resultados;

Estruturar e executar rituais de gestão de performance dos negócios com base em dados.

Liderar iniciativas estratégicas para a Business Unit

Realizar análises retrospectivas e preditivas sobre o desempenho dos diferentes negócios da vertical

Eaí, topa escalar #AlémDoTopo com a gente?

Main responsibilities

Atividades que farão parte da sua Escalada🚀

• Garantir a manutenção e evolução dos pipelines de dados escalando para atender o crescimento da Escale;
• Metrificar e monitorar sistemas focando em data quality e consistência dos dados;
• Definir e desenvolver ferramentas para oferecer suporte ao gerenciamento de pipeline de dados self-service (ETL);
• Usando ampla tecnologia relacionada a Big Data para melhorar o desempenho do processamento de dados;
• Pensar em ferramentas e produtos que gerem valor para o negócio para compor nossa plataforma de dados e que facilitem a análise e criação de produtos de dados;
• Responsável pelo desenho e desenvolvimento da nossa plataforma de dados;
• Eventualmente desenvolver aplicações que componham a nossa plataforma;
• Avaliar novas ferramentas para compor nossa stack de dados e monitorar/manter ferramentas existentes;
• Suportar os clientes da nossa plataforma no seu uso e dúvidas.

Requirements and skills

• Experiência com engenharia de software (Python, Java, Scala, Clean Architecture, TDD...);
• Experiência (Ex. Lambda, Kappa)
• Experiência em tecnologia de processamento distribuído (Spark, Hive e Presto);
• Experiência com Cloud (AWS, GCP ou Azure);
• Infraestrutura como código (Terraform, Ansible, puppet);
• Conhecimento em orquestradores de recursos, containers (Stateless e Stateful), Docker, Kubernetes;

Desejável:

• Compreensão geral de padrões de segurança (Ex. Framework DAMA);
• Conhecimento prático em banco de dados relacionais, não relacionais e modelagem (SQL);
• Experiência com processamento de dados em streaming (Kafka, Flink, Druid)