Data Engineer - Build Pipelines in Barcelona (Hybrid)

Desera; Barcelona; Hybride; EUR 65 000 - 90 000; Plein temps

Résumé du poste

Desera ищет инженера по данным для создания и оптимизации конвейеров данных в PySpark и Databricks. Ваша работа будет связана с SQL и Python, обеспечением качества данных, мониторингом и тестами, участием в CI/CD и код-ревью. Ожидается наставничество команды и сотрудничество с заказчиками и партнёрами проекта.

Команда будет расти в Барселоне; гибридный формат работы в городе. Расположение и реже необходимо знание английского и испанского языков, высокая ответственность.

Qualifications

• Опыт работы с Databricks, PySpark и SQL.
• Знание Azure или другой крупной облачной платформы.
• Готовность работать с Python, Git и оркестрацией (Airflow).
• Сильное чувство ответственности и ориентация на качество данных.
• Хороший уровень английского и испанского.

Responsabilités

• Проектирование, сборка и оптимизация конвейеров данных с использованием PySpark и Databricks.
• Написание эффективного SQL и Python кода, обеспечение тестирования.
• Добавление проверок качества данных, мониторинга и автоматических тестов.
• Участие в CI/CD, обзор кода и стандартов команды.
• Использование инструментов ИИ в кодинге (GitHub Copilot) в повседневной работе.
• Наставничество команды, установка стандартов и взаимодействие с заинтересованными сторонами и партнером по доставке.

Connaissances

PySpark

Databricks

SQL

Python

Data quality

CI/CD

Mentoring

Stakeholder collaboration

Outils

GitHub Copilot

Git

Airflow

Azure

CI/CD pipelines

Description du poste

Desera ищет инженера по данным для создания и оптимизации конвейеров данных в PySpark и Databricks. Ваша работа будет связана с SQL и Python, обеспечением качества данных, мониторингом и тестами, участием в CI/CD и код-ревью. Ожидается наставничество команды и сотрудничество с заказчиками и партнёрами проекта.

Команда будет расти в Барселоне; гибридный формат работы в городе. Расположение и реже необходимо знание английского и испанского языков, высокая ответственность.