Engenheiro de Dados Pleno

Reply; São Paulo; Remote; BRL 180,000 - 300,000; Full time

Benefits offered by this job

Cartão Swile

TotalPass/Gympass

Apoio à Saúde Mental

Plano de Saúde Bradesco

Plano Odontológico Bradesco

Participação nos Lucros

Auxílio-Creche

Incentivo a certificações

Palestras e Webinars

Programa RAF de indicações

Seguro de Vida

Subsídio para Inglês ou Italiano

Open English desconto

Aniversário presente

Possibilidade de mudança do país

Parcerias com Universidades

Job summary

A Reply está oferecendo uma vaga remota para atuar com dados em grande escala, envolvendo ingestão, processamento e armazenamento de volumes significativos. Você trabalhará com Python, PySpark e um conjunto de serviços AWS para construir pipelines eficientes e escaláveis.

O candidato ideal possui experiência em Big Data, modelagem de dados, SQL, ETL e ferramentas como Kafka e Data Lake. A posição permite trabalho remoto e oportunidades de certificação na área.

Qualifications

• Experiência prática com ingestão, integração, processamento e armazenamento de grandes volumes de dados.
• Atuação em projetos de Big Data e uso de ferramentas AWS (EMR, Kinesis, RedShift, S3, Glue, ElasticSearch).
• Desenvolvimento com Python e PySpark para processamento de dados.
• Conhecimento de modelagem de dados relacionais e dimensionais (Data Warehouse).
• Experiência com bancos de dados SQL e ferramentas ETL.
• Conhecimento de Kafka e Data Lake/Data Ops.

Responsibilities

• Construir e gerenciar pipelines de dados confiáveis envolvendo ingestão, processamento, integração, armazenamento e disponibilização de dados.
• Contribuir em arquitetura de sistemas distribuídos para processamento massivo de dados em paralelo e colaborar com equipes de ciência de dados.

Skills

Big Data

Python

PySpark

ETL

Modelagem de dados

SQL

Kafka

DataOps

Tools

AWS (EMR)

Kinesis

RedShift

S3

Glue

ElasticSearch

Job description

Sobre nós

A Reply é uma multinacional italiana líder no mercado de TI europeu, hoje com presença em 18 países e mais de 10.000 Respondentes apaixonados por inovação e pelo trabalho em equipe. Atuamos com integração de sistemas, soluções em gestão de excelência e consultoria especializada em TI. Nossos esforços são direcionados ao incentivo ao sucesso do cliente através da excelência da entrega. Atuamos com diversas soluções no mercado, entre Machine Learning, Inteligência Artificial, Indústria 4.0 e soluções em Cloud.

Na Reply valorizamos a inclusão e diversidade em toda a sua multiplicidade.

O Que Você Pode Esperar

Ambiente de ponta / Inovação no DNA - Projetos desafiantes ao lado de especialistas específicos.

Atuamos com as mais avançadas frentes de mercado IA, Cloud, Machine Learning e Indústria 4.0 no seu dia a dia.

Empresa global - Presente em 18 países, conectando equipes e tecnologias emergentes.

Parcerias estratégicas - Alianças com Microsoft, Oracle, AWS e SAP.

Formação contínua - Desconto e parceria com as melhores universidades e plataformas Tech do Brasil.

Idiomas sem barreiras -Condições especiais em plataformas de ensino de idiomas.

Sobre a Vaga

Atuação remota!!

Requisitos

• Experiência prática com ingestão, integração, processamento e armazenamento de grandes volumes de dados;
• Atuação em projetos de Big Data;
• Behavior Driven Development (BDD).
• Extração de dados em Python e processamento de dados com PySpark;
• Experiências em ferramentas ETL's;
• Conhecimento em modelagem de dados relacionais e dimensionais (Data WareHouse);
• Experiência com bancos de dados SQL;
• Experiência com conjunto de ferramentas relacionadas a Big Data na AWS como: EMR, Kinesis, RedShift, S3, Glue, ElasticSearch;
• Conhecimento em Kafka;
• Conhecimento com Data Lake e Data Ops.

Desejável/ Diferencial

• Certificações AWS;
• Conhecimento em ferramentas de provisionamento de infraestrutura em cloud via código tais como: Terraform, CloudFormation.

Principais Atividades

• Construir e gerenciar pipelines confiáveis de dados envolvendo ingestão/coleta, processamento, integração, armazenamento e disponibilização de dados na organização.
• Atuar em uma arquitetura de sistemas distribuídos para o processamento de dados massivos em paralelo (MPP), combinando diversas fontes de dados heterogêneas e colaborando com equipes de análise e ciência de dados na construção de soluções e geração de valor baseadas em dados.

Benefícios

• Cartão flexível Swile pra você usar como quiser (VA e VR)
• Totalpass ou Gympass
• Apoio à Saúde Mental - Psicologia Viva
• Plano de Saúde Bradesco
• Plano Odontológico Bradesco
• Participação nos Lucros
• Auxílio-Creche para nossas mamães
• Incentivo a certificações
• Palestras e Webinars especiais
• Programa RAF de bonificação por indicações
• Seguro de Vida
• Subsídio para Inglês ou Italiano
• Desconto Open English
• Presente de aniversário
• Possibilidade de mudança do país
• Parcerias com Universidades