Data engineer

agap2; Barcelona; Híbrido; EUR 60.000 - 90.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Meal voucher

Health insurance

Flexible compensation plan

Descripción de la vacante

agap2 ищет Data Engineer для работы над облачной платформой данных и построения надежных конвейеров. Вы будете развивать и поддерживать модели данных, пайплайны и каталоги, обеспечивая доступ к чистым данным командам.

Требуется более 2 лет опыта с dbt в продакшене, знания Azure Data Factory и Snowflake, а также навыки работы в Agile среде и с Git/CI. Гибридный формат и Барселона как локация.

Formación

• Опыт работы с dbt в продакшене более 2 лет.
• Глубокие знания Azure Data Factory: конвейеры/пайплайны, триггеры, связанные сервисы.
• Продвинутый SQL, опыт Snowflake или аналогичных облачных платформ.
• Знакомство с архитектурами Medallion, Data Vault или размерной моделированием.
• Опыт Git и CI/CD в дата-проектах.
• Способность работать автономно и нести ответственность за техническое решение.
• Умение общаться с техническими и бизнес-стейкхолдерами, работа в Agile.

Responsabilidades

• Проектирование, разработка и поддержка моделей данных с использованием dbt.
• Разработка Silver и Gold моделей в Snowflake.
• Определение конвенций именования, линейности, тестов и материализации.
• Разработка, развёртывание и мониторинг пайплайнов Azure Data Factory.
• Управление загрузкой данных из различных источников.
• Обеспечение качества данных: документация, классификация, прослеживаемость, тестирование.
• Сотрудничество с BI/аналитикой для доступности надёжных данных.
• Обновление каталога данных и политики безопасности.

Conocimientos

dbt in prod

SQL proficiency

Git & CI/CD

Agile teamwork

Herramientas

Azure Data Factory

Snowflake

dbt

Descripción del empleo

Описание:

At agap2, we are looking for a Data Engineer to join a project to evolve a cloud data platform. If you enjoy programming, building robust pipelines, and solving technical challenges autonomously, this project is for you! You will develop and maintain the ingestion flows and data models that ensure information reaches the teams who need it clean, traceable, and on time.

Задачи:

• Design, develop, and maintain data models using dbt as the main tool.
• Develop and evolve Silver and Gold models in Snowflake, in coordination with the data domain leads.
• Define development conventions for naming, lineage, tests, and materialization.
• Design, deploy, and monitor Azure Data Factory pipelines, as well as resolve incidents and optimize performance and costs.
• Manage data ingestion from different source systems into the platform.
• Apply data quality and governance criteria from the design stage: documentation, classification, traceability, and automated tests.
• Collaborate with BI, automation, and advanced analytics teams to facilitate access to reliable data.
• Keep the data catalog up to date and contribute to the evolution of the platform, its security controls, and its privacy and masking policies.
• Collaborate with providers and internal teams to ensure the technical consistency of solutions.

Требования:

• More than 2 years of experience with dbt in production environments.
• Strong knowledge of Azure Data Factory: pipelines, triggers, linked services, and Integration Runtimes.
• Advanced SQL proficiency and experience with Snowflake or other cloud data platforms.
• Familiarity with data architectures such as Medallion, Data Vault, or dimensional modeling.
• Experience with Git and CI/CD workflows applied to data projects.
• Autonomy and a strong sense of responsibility to lead a technical domain from start to finish.
• Clear communication with technical and business stakeholders, and the ability to work in a team in agile and evolving environments.

Будет плюсом:

• Knowledge of Python, PySpark, Pandas, or scripting for automation;
• Experience with data governance and catalog tools or dbt Semantic Layer;
• Familiarity with Power BI or other BI tools;
• Knowledge of AI/ML tools applied to data, such as MLflow or Feature Stores;
• Experience with Ask Your Data solutions.

Условия:

• Permanent contract from day one.
• Hybrid working arrangement in Barcelona.
• Flexible working hours.
• Meal voucher, health insurance, and a flexible compensation plan.
• Work with modern technologies and multidisciplinary teams.
• Professional growth opportunities and continuous learning.