Data Engineer AWS

Ytech; Lisboa; Hybrid; EUR 70,000 - 95,000; Full time

Benefits offered by this job

Regime híbrido

Ambiente dinâmico

Oportunidades de crescimento

Job summary

A Ytech está a procurar um Senior Data Engineer para integrar um projeto na área de dados em Lisboa. Vais participar na construção, evolução e manutenção de pipelines de dados cloud-native em AWS, com foco em integração de APIs, FTP/SFTP e transformação de dados com Python e SQL.

A função envolve monitorização, performance e GDPR de dados, em ambiente Scrum. Procura-se alguém com sólido background em AWS (S3, ECS, Lambda, RDS, SNS/SQS, IAM, CloudWatch) e experiência em Snowflake, DBT Core e

Qualifications

• Formação superior em Engenharia, Informática ou área semelhante.
• Experiência sólida como Data Engineer, idealmente sénior.
• Dominio de AWS, Python e SQL com foco em pipelines de dados.

Responsibilities

• Desenvolver e manter data pipelines cloud-native em AWS, batch e streaming.
• Integrar dados de APIs, FTP, SFTP e sistemas internos.
• Transformar dados com Python/SQL e optimizar queries.
• Trabalhar com Snowflake e definir governance de dados e monitorização.

Skills

AWS

Python

SQL

Data Engineering

Snowflake

Data Pipelines

Education

Engenharia ou Informática

Tools

Pandas

Boto3

Snowflake

Airflow

DBT Core

Terraform

Job description

Na Ytech, vivemos e respiramos tecnologia.

A nossa missão é transformar desafios em soluções e encontrar, todos os dias, novas formas de inovar.

Fundada em 2020, somos uma start-up tecnológica que atua nos setores de IT e Telecomunicações, com uma ambição clara: agitar o mercado, romper padrões e criar valor real através da inovação.

Qual o desafio que temos para ti?

Localização: Lisboa — zona de Moscavide

Regime: Híbrido — 2x por semana no escritório

Procuramos um Senior Data Engineer para integrar um projeto na área de dados, participando na construção, evolução e manutenção de soluções de Data Engineering em AWS e Snowflake.

Vais trabalhar na criação de pipelines que recolhem dados de diferentes fontes, como APIs, FTP e SFTP, transformando-os e disponibilizando-os de forma estruturada, segura e eficiente para suportar análises e decisões de negócio.

Farás parte de uma equipa Scrum, colaborando diretamente com Data Analysts e outras equipas, com responsabilidade não só pelo desenvolvimento, mas também pela monitorização, performance e acompanhamento das soluções em produção.

O que vais fazer:

• Desenvolver e manter data pipelines cloud-native em AWS, tanto batch como streaming;
• Integrar dados provenientes de APIs, FTP, SFTP e sistemas internos;
• Transformar e processar dados utilizando Python e SQL;
• Trabalhar com serviços AWS como S3, ECS, Lambda, RDS, SNS/SQS, IAM e CloudWatch;
• Desenvolver e evoluir soluções de dados em Snowflake;
• Criar e gerir datasets de grande dimensão, garantindo qualidade, consistência e performance;
• Realizar data modelling e desenvolver objetos de base de dados, incluindo tabelas, views, procedures e scripts;
• Criar e otimizar queries SQL complexas, tendo em conta performance e escalabilidade;
• Implementar mecanismos de monitorização, logging e alertas;
• Contribuir para iniciativas de Data Governance, incluindo catalogação e gestão de metadata;
• Implementar testes funcionais e não funcionais sobre os dados;
• Participar no troubleshooting e resolução de incidentes em produção;
• Trabalhar em conjunto com equipas multidisciplinares na recolha de requisitos e implementação de soluções;
• Contribuir para a melhoria contínua da arquitetura, escalabilidade e performance dos produtos de dados.

O que valorizamos em ti:

• Forte capacidade analítica e de resolução de problemas;
• Autonomia, proatividade e sentido de responsabilidade;
• Atenção ao detalhe e foco na qualidade e performance;
• Mindset Agile, com gosto pelo trabalho colaborativo e pela partilha de conhecimento;
• Capacidade de apoiar e contribuir para o crescimento de outros elementos da equipa;
• Boa capacidade de comunicação e facilidade em trabalhar com diferentes stakeholders;
• Interesse por aprendizagem contínua e evolução tecnológica.

O que procuramos:

• Formação superior em Engenharia, Informática ou área semelhante;
• Experiência sólida como Data Engineer, idealmente em posições sénior;
• Experiência comprovada com AWS, nomeadamente S3, ECS, Lambda, RDS, SNS/SQS, IAM e CloudWatch;
• Domínio de Python, incluindo bibliotecas como Pandas e Boto3;
• Experiência avançada com SQL, incluindo queries complexas, grandes volumes de dados e otimização de performance;
• Experiência na construção e manutenção de data pipelines;
• Experiência com bases de dados analíticas e dados não estruturados;

Será valorizada experiência com Snowflake, DBT Core, Airflow, AWS Step Functions ou Prefect, bem como práticas de CI/CD, GitHub/GitLab, Terraform ou CloudFormation e ferramentas de visualização como Tableau.

Certificações AWS ou Snowflake serão também consideradas uma mais-valia.

Benefícios em fazeres parte da nossa equipa:

Projetos tecnologicamente desafiantes e com impacto real;

Flexibilidade de um regime híbrido;

Ambiente dinâmico, colaborativo e orientado para a inovação;

Oportunidades de aprendizagem, desenvolvimento e crescimento profissional;

Acompanhamento próximo e uma equipa que valoriza as tuas ideias.