Data Engineer

Emagine - Portugal; Teletrabalho; BRL 70.000 - 90.000; Tempo integral

Resumo da oferta

Uma empresa de tecnologia está à procura de um Engenheiro de Dados/ETL com experiência em criar e operar pipelines de dados na AWS. O candidato ideal deve ter um sólido conhecimento de bancos de dados relacionais e habilidades avançadas em SQL e Python. Também são desejáveis conhecimentos em AWS Glue e Amazon Athena. O trabalho deve ser feito no fuso horário da Dinamarca, envolvendo colaboração com engenheiros e analistas.

Qualificações

• Experiência sólida em bancos de dados relacionais e SQL.
• Desenvolvimento forte em Python para processamento de dados.
• Experiência prática com Amazon Athena.
• Vivência com AWS Glue e Glue Data Catalog.
• Conhecimento de Apache Iceberg.

Responsabilidades

• Projetar e construir pipelines de dados escaláveis e confiáveis.
• Trabalhar com arquiteturas de data lake modernas na AWS.
• Colaborar com engenheiros e analistas sobre modelos de dados.

Conhecimentos

SQL

Python

Amazon Athena

AWS Glue

Apache Iceberg

AWS Data Services

Ferramentas

Apache Flink

Kafka

Descrição da oferta de emprego

Descrição da vaga
Profile : Data / ETL Engineer (AWS)

We are looking for a Data / ETL Engineers with strong experience building and operating data pipelines in AWS.

Core skills & experience :

• Solid understanding of relational databases, with strong SQL skills (experience with Microsoft SQL Server preferred)
• Strong Python development skills, particularly for data processing and ETL workloads
• Hands-on experience with Amazon Athena for querying data in data lakes
• Experience with AWS Glue, including Glue Data Catalog, databases, and crawlers
• Knowledge of Apache Iceberg for table formats and data lake management
• Broad AWS knowledge, including data services, IAM, networking basics, and operational best practices

Nice-to-have / preferred experience :

• Experience building streaming data pipelines, preferably using Apache Flink
• Familiarity with Kafka (managed or self-hosted) for event-driven architectures
• Experience with non-relational datastores and / or column-oriented data stores (e.g. NoSQL, data warehouse or analytics-focused systems)

General expectations :

• Able to design scalable, reliable data pipelines
• Comfortable working with modern data lake architectures in AWS
• Experience collaborating with engineers, analysts, and stakeholders around data models and ingestion patterns
• Strong English skills

To work in the Denmark time zone