Engenheiro De Dados Sênior

Decision Group; São Paulo; Remote; BRL 167,000 - 290,000; Full time

Job summary

A Decision group procura um profissional de TI para atuar em projetos de dados com foco em streaming, Spark, Airflow e Databricks. A posição envolve ETL/ELT, Scala/Python e arquitetura Lambda/Kappa, com 100% de trabalho remoto. A alocação inicial é de 4 meses, com renovação conforme desempenho.

Requisitos incluem Docker, Linux, SQL/NoSQL e liderança de equipes. Busca-se visão técnica flexível, capacidade de antever incertezas e promover revisões de código para melhoria da manutenibilidade.

Qualifications

• Experiência com ferramentas de streaming de dados e Big Data.
• Conhecimento em AWS Big Data (EMR/Spark, Athena, Glue, Lambda, Redshift, S3) é diferencial.
• Experiência com arquitetura Lambda/Kappa e modelos de dados para pipelines flexíveis.

Skills

Liderança

Trabalho em equipe

Análise de requisitos

Gestão de riscos

Revisão de código

Arquitetura de software

Education

Ensino Superior Completo

Tools

Apache Spark

Apache Airflow

Scala/Python

ETL/ELT

Docker

Databricks

SQL/NoSQL

Linux

Kafka

Job description

Nível Acadêmico: Ensino Superior Completo Turno/Horas -- Áreas de Atuação Profissional: TI - Projetos Descrição: Alocação inicial de 4 meses, com possibilidade de renovação, de acordo com o desempenho. Trabalho 100% remoto Habilidades:

Requisitos:

Competências Técnicas/ Hard Skills:

• Experiência com ferramentas de streaming de dados;
• Apache Spark;
• Apache Airflow;
• Scala/Python;
• ETL/ELT;
• Git;
• SQL/NoSQL;
• Data Modeling;
• Docker;
• Linux;
• Databricks;
• Arquitetura Lambda/Kappa.

Competências Comportamentais/ Soft Skills:

• Capaz de definir soluções tecnicamente flexíveis e escaláveis;
• Antecipa pontos de incerteza em projetos;
• Capaz de desenhar e implementar soluções técnicas dentro do time de atuação;
• Utiliza revisões de código para melhorar a estrutura e manutenibilidade;
• Capaz de definir recursos necessários para ele e/ou seu time finalizarem uma determinada tarefa;
• Competência em liderança e capacidade de trabalho em equipe.

Diferenciais:

• Experiência com ferramentas de Big Data da AWS: EMR/Spark, Athena, Glue, Lambda, Redshift, S3, Kafka, ou outros;
• Experiência com Big Data e Analytics;
• Habilidades de Liderança e Gestão de Projetos;
• Conhecimento em Inteligência Artificial e Machine Learning.