Lead Data Engineer - Databricks & Lakehouse

Solvd Inc.; Colombia; On-site; COP 180,000,000 - 300,000,000; Full time

Job summary

Solvd Inc. приглашает старшего специалиста по данным на работу в роли ведущего архитектора больших данных. Ваша задача — руководить реализацией проектов на базе Databricks, проектировать архитектуры Lakehouse и руководить командами разработки и миграций.

Требуется опыт разработки ETL‑пайплайнов, владение Python и Spark, знание dbt, а также понимание вопросов безопасности и соответствия требованиям. Офис в Колумбии или удалённая работа по регионам устанавливается компанией.

Qualifications

• Опыт разработки распределённых Databricks‑решений и архитектур Lakehouse.
• Практический опыт построения больших дата‑пайплайнов.
• Опыт программирования на Python и работы с SQL/Spark.
• Опыт использования dbt в Databricks экосистеме.
• Понимание управления данными, безопасности и соответствия требованиям.

Responsibilities

• Обеспечивать техническое руководство и сопровождение клиентов в реализации больших дата‑проектов.
• Вести проекты от архитектуры и дизайна до инжиниринга данных и развертывания моделей.
• Вести миграции клиентов.
• Проектировать решения от идеи до продакшна.
• Предоставлять наставничество команде.
• Поддерживать технические пред‑продажи.

Skills

Technical leadership

Python

SQL

Spark / PySpark

Databricks

dbt

Data governance

Cloud integrations

ETL pipelines

Education

Bachelor’s degree in Computer Science / Information Systems / Engineering

Tools

Databricks

Terraform

MLflow

Delta Lake

Azure / AWS / GCP Databricks

Power BI

Job description

Solvd Inc. приглашает старшего специалиста по данным на работу в роли ведущего архитектора больших данных. Ваша задача — руководить реализацией проектов на базе Databricks, проектировать архитектуры Lakehouse и руководить командами разработки и миграций.

Требуется опыт разработки ETL‑пайплайнов, владение Python и Spark, знание dbt, а также понимание вопросов безопасности и соответствия требованиям. Офис в Колумбии или удалённая работа по регионам устанавливается компанией.