AWS Data Engineer | Tech Lead

Compass UOL; Brasil; Presencial; BRL 80.000 - 120.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia de dados está em busca de um profissional para desenvolver e implementar arquiteturas de dados escaláveis. O candidato ideal deve ter domínio de Python, Node.js e experiência em ambientes AWS, assim como conhecimentos em Cyber Security. A posição requer colaboração em ambientes ágeis e forte vivência em práticas de Infraestrutura como Código. Oportunidade em um ambiente dinâmico, contribuindo para a inovação e segurança dos dados.

Qualificações

• Domínio avançado de Python, Node.js, Scala e SQL/NoSQL com foco em arquiteturas orientadas a eventos.
• Experiência com Apache Spark e Apache Kafka; conhecimento em Talend será considerado diferencial.
• Forte vivência em ambientes AWS; certificações na plataforma são um diferencial relevante.
• Conhecimento em Docker, Git, Jenkins e práticas de Infraestrutura como Código.
• Conhecimento em Cyber Security e boas práticas de segurança da informação.

Responsabilidades

• Desenhar e implementar arquiteturas de dados escaláveis e cloud native.
• Desenvolver, manter e evoluir pipelines de dados utilizando Python e PySpark.
• Garantir segurança da informação e conformidade desde a concepção das soluções.
• Atuar em ambientes ágeis colaborando com Product Owners e Arquitetos.
• Implementar e gerenciar infraestrutura como código, assegurando padronização e escalabilidade.

Conhecimentos

Python

Scala

SQL/NoSQL

Node.js

Apache Spark

Apache Kafka

Docker

Git

Jenkins

Cyber Security

Descrição da oferta de emprego

Responsabilidades e atribuições

• Desenhar e implementar arquiteturas de dados escaláveis e cloud native, incluindo engines de processamento batch e streaming;
• Desenvolver, manter e evoluir pipelines de dados utilizando Python, PySpark, Scala e Apache Spark;
• Garantir segurança da informação e conformidade desde a concepção das soluções (Security by Design), aplicando práticas de DevSecOps e Governança de Dados;
• Atuar em ambientes ágeis (Scrum, Kanban ou SAFe), colaborando de forma próxima com Product Owners, Arquitetos e demais desenvolvedores;
• Implementar e gerenciar infraestrutura como código (Infrastructure as Code – IaC), assegurando padronização, rastreabilidade e escalabilidade dos ambientes.

Requisitos e qualificações

• Domínio avançado de Python, Node.js, Scala e SQL/NoSQL, com experiência em arquiteturas orientadas a eventos (Event-Driven Architecture);
• Experiência com Apache Spark e Apache Kafka; conhecimento em Talend será considerado um diferencial;
• Forte vivência em ambientes AWS; certificações na plataforma são consideradas um diferencial relevante;
• Conhecimento em Docker, Git, Jenkins e práticas de Infraestrutura como Código (Infrastructure as Code – IaC);
• Conhecimento em Cyber Security, com compreensão de boas práticas de segurança da informação aplicadas a ambientes de dados e cloud.