Engenheiro de Dados Sr – Localiza&Co – Home Office

Localiza&Co; Rio de Janeiro; Teletrabalho; BRL 20.000 - 80.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia no Rio de Janeiro está em busca de um Engenheiro de Dados Sr para projetar e implementar pipelines robustas no ecossistema AWS. O candidato ideal deve ter experiência em SQL, Python e ferramentas de orquestração como Apache Airflow. Oferecemos a possibilidade de trabalho home office e um ambiente dinâmico para desenvolvimento de suas habilidades.

Qualificações

• Proficiência em SQL, DBT, Python e Spark.
• Experiência com ferramentas de orquestração de dados como Apache Airflow.
• Conhecimentos sobre diferentes técnicas de arquitetura e modelagem de dados.

Responsabilidades

• Projetar, desenvolver e implementar pipelines robustas utilizando ferramentas do ecossistema AWS.
• Gerenciar integrações e processos de transformação de dados usando SQL, Python e Rest.
• Aplicar Spark para processamento de grandes volumes de dados.

Conhecimentos

AWS

SQL

DBT

Python

Spark

Apache Airflow

Descrição da oferta de emprego

Overview

Engenheiro de Dados Sr – Localiza&Co – Home Office

Responsabilidades

• Projetar, desenvolver e implementar pipelines robustas, conectando dados de diversas fontes utilizando principalmente ferramentas do ecossistema AWS.
• Implementar soluções de enriquecimento de dados escaláveis e eficientes utilizando o DBT para transformar dados brutos em modelos de dados personalizados e insights acionáveis para o negócio.
• Gerenciar integrações, processos de transformação e automações de tarefas usando conectores de dados, APIs SQL, Python e Rest.
• Utilizar SQL para consultas e manipulação de dados em bancos de dados relacionais e não relacionais.
• Aplicar Spark para processamento de grandes volumes de dados em tempo real e em batch.

Requisitos

• AWS (Athena, S3, Glue, Lambda)
• Proficiência em SQL, DBT, Python e Spark
• Experiência com ferramentas de orquestração de dados como Apache Airflow
• Conhecimentos sobre diferentes técnicas de arquitetura e modelagem de dados para fins analíticos (Ex.: Data Mesh, Data Mart, Data Lake, Data Warehouse)
• Experiência com Modelagem de Dados (relacional e/ou analítico) e processos ETL
• APIs, Gateways, Micro Serviços e Containers
• Noções sobre boas práticas de engenharia de software (Documentação, testes automatizados, código limpo, monitoramento)

Diferenciais

• Possuir Certificações AWS associadas à função de Cloud Data Engineer, sendo elas:
• Cloud Practitioner
• Data Engineer
• Solutions Architect
• Machine Learning Engineer