Senior Data Engineer - Scale Data Platforms & AI Pipelines

QuickOps Consulting; Portugal; On-site; EUR 70,000 - 100,000; Full time

Job summary

A QuickOps procura um Senior Data Engineer para se juntar à equipa em Portugal. Procuramos alguém com visão proativa e capaz de enfrentar novos desafios, contribuindo para soluções de dados robustas e escaláveis.

Competências técnicas incluem SQL e Python em produção, experiência com plataformas cloud (AWS/GCP/Azure), orquestração com Airflow/Dagster/ADF, e conhecimentos em data warehousing (Snowflake/BigQuery) e pipelines com Spark, Databricks, Kafka ou equivalentemente.

Qualifications

• Conhecimento avançado de SQL e Python em ambientes de produção.
• Experiência com plataformas cloud (AWS, GCP ou Azure) e orquestração de dados (Airflow, Dagster, Azure Data Factory).
• Conhecimentos de Snowflake ou BigQuery e transformação com dbt ou similar.
• Experiência com Spark/PySpark, Databricks e com soluções de streaming (Kafka, Kinesis, Pub/Sub).
• Conhecimentos de pipelines de embeddings, bases de dados vetoriais, retrieval feeds, feature stores, Parquet/Iceberg/Delta.

Skills

SQL

Python

Comunicação

Tools

AWS

GCP

Azure

Airflow

Dagster

Azure Data Factory

Snowflake

BigQuery

dbt

Spark

PySpark

Databricks

Kafka

Kinesis

Pub/Sub

MQTT

Parquet

Iceberg

Delta

Terraform

Docker

Kubernetes

GitHub Actions

Great Expectations

Soda

Monte Carlo

MongoDB

Google Ads

Meta APIs

CRM APIs

Job description

A QuickOps procura um Senior Data Engineer para se juntar à equipa em Portugal. Procuramos alguém com visão proativa e capaz de enfrentar novos desafios, contribuindo para soluções de dados robustas e escaláveis.

Competências técnicas incluem SQL e Python em produção, experiência com plataformas cloud (AWS/GCP/Azure), orquestração com Airflow/Dagster/ADF, e conhecimentos em data warehousing (Snowflake/BigQuery) e pipelines com Spark, Databricks, Kafka ou equivalentemente.