Data engineer in Lakehouse architectures

Teamative; EE. UU.; A distancia; USD 90.000 - 140.000; Jornada completa

Descripción de la vacante

Teamative ищет инженера по данным для разработки современных архитектур данных. Ваша задача проектировать и оптимизировать конвейеры данных, используя Microsoft Fabric и Azure Databricks, чтобы обеспечить масштабируемые решения.

Кандидат будет строить Lakehouse-архитектуры с Delta Lake, PySpark и SQL, интегрировать источники данных и обеспечивать качество и Governance. Требуется свободное владение английским языком и способность работать удаленно в рамках B2B.

Formación

• Опыт работы с Microsoft Fabric и Azure Databricks.
• Знание PySpark и SQL.
• Опыт разработки Lakehouse/Delta Lake архитектур.
• Свободное владение английским языком.

Responsabilidades

• Разрабатывать и поддерживать конвейеры данных ETL/ELT с Azure Databricks и MS Fabric.
• Строить масштабируемые компоненты платформы данных с Delta Lake, PySpark и SQL.
• Интегрировать источники данных в централизованный Lakehouse.
• Оптимизировать производительность конвейеров, обеспечить качество данных и управление.
• Сотрудничать с заинтересованными лицами для преобразования требований в решения.

Conocimientos

Microsoft Fabric

Azure Databricks

PySpark

SQL

Lakehouse

Delta Lake

Azure ecosystem

Communication

English

Herramientas

Delta Lake

Descripción del empleo

Описание:

We are looking for Data Engineers to join our development team. In this role, you will design, build, and optimize modern data architectures, focusing heavily on Microsoft Fabric and Databricks to deliver scalable data solutions.

Задачи:

Develop and maintain robust data pipelines (ETL/ELT) using Azure Databricks and MS Fabric. Build scalable data platform components using Delta Lake, PySpark, and SQL. Integrate diverse data sources into a centralized Lakehouse architecture. Optimize pipeline performance and ensure data quality and governance standards. Collaborate closely with stakeholders to translate business requirements into technical solutions.

Требования:

Strong, hands-on experience with Microsoft Fabric and Azure Databricks. Proficient in PySpark, SQL, and building Lakehouse/Delta Lake architectures. Experience within the Azure ecosystem. Proactive problem solver with strong communication skills. Fluent English (written and spoken) is mandatory.

Будет плюсом: Azure Synapse is a plus; German is a plus

Условия:

B2B Remote Full-time December - ongoing 6 month+