Data Engineer – Real-Time Pipelines & Snowflake

Enfint; Lisboa; Híbrido; EUR 54 000 - 66 000; Tempo integral

Vantagens oferecidas por esta oferta de emprego

Health insurance

Mental health support

Financial support for training

Flexible working

Career development opportunities

Resumo da oferta

Enfint ищет Data Engineer для разработки и поддержки масштабируемых ELT/ETL пайплайнов в Snowflake. Вы будете внедрять ingestion-решения из разных источников, включая реальные потоки через Kafka, и разворачивать KSQL/KStreams конвейеры для обработки данных в реальном времени.

Кандидат обладает опытом с SQL, Python и Airflow, а также знанием облачных платформ (AWS/Azure/GCP). Участвование в проектах по страхованию — преимущество, гибридный режим работы.

Qualificações

• Опыт работы Data Engineer в облачных решениях.
• Опыт в страховании/финансы приветствуется.
• Сильные SQL-навки и Python или аналогичный язык скриптов.
• Опыт Kafka для ingest и стриминга.
• Практический опыт KStreams и KSQL.
• Опыт с Snowflake: моделирование данных и оптимизация.
• Опыт Airflow для оркестрации задач.
• Знания AWS/Azure/GCP и DevOps/CI-CD.
• Умение взаимодействовать с техническими и бизнес-заинтересованными сторонами.
• Желателен опыт с Guidewire и Confluent Schema Registry.

Responsabilidades

• Проектирование, сборка и поддержка масштабируемых ELT/ETL пайплайнов в Snowflake.
• Интеграция данных из нескольких источников, включая реальные потоки через Kafka.
• Разработка и развёртывание конвейеров KSQL и KStreams для обработки реального времени.
• Разработка эффективных моделей данных в Snowflake для аналитики.
• Обеспечение качества, целостности и надёжности данных на всём жизненном цикле.
• Оптимизация пайплайнов и рабочих нагрузок Snowflake по производительности.
• Сотрудничество с архитекторами, аналитиками и дата-учёными для удовлетворения требований.
• Вклад в стандарты и лучшие практики data engineering, развитие платформы.

Conhecimentos

Snowflake моделирование

Kafka стриминг

KSQL / KStreams

SQL

Python

Airflow

Облачные платформы (AWS/Azure/GCP)

CI/CD / DevOps

Confluent Schema Registry

Guidewire (желательно)

Ferramentas

Snowflake

Kafka

KSQL

KStreams

Airflow

AWS

Azure

GCP

Confluent Schema Registry

Descrição da oferta de emprego

Enfint ищет Data Engineer для разработки и поддержки масштабируемых ELT/ETL пайплайнов в Snowflake. Вы будете внедрять ingestion-решения из разных источников, включая реальные потоки через Kafka, и разворачивать KSQL/KStreams конвейеры для обработки данных в реальном времени.

Кандидат обладает опытом с SQL, Python и Airflow, а также знанием облачных платформ (AWS/Azure/GCP). Участвование в проектах по страхованию — преимущество, гибридный режим работы.