Senior Lakehouse Data Engineer - Pipelines & Streaming

Jobtailor; Málaga; On-site; EUR 42,000 - 66,000; Full time

Job summary

Jobtailor busca un ingeniero de datos para liderar la integración de plataformas de datos, trabajando con entornos lakehouse, pipelines de ingesta y transformación.

Se requiere experiencia en SQL, gestión de usuarios y RBAC, además de PySpark y tecnologías de streaming. Inglés B2 para comunicaciones técnicas.

Qualifications

• Experiencia trabajando con Lakehouse y bases de datos analíticas.
• Conocimientos sólidos de SQL.
• Experiencia en gestión de usuarios, permisos, roles, RBAC o administración de bases de datos.
• Experiencia en creación y mantenimiento de pipelines de datos.
• Conocimientos de Kinesis o tecnologías similares de streaming como Kafka.
• Experiencia con PySpark.
• Conocimientos de entornos Lakehouse.
• Valorable experiencia con Apache Iceberg y Dagster.
• Valorable experiencia con Go.
• Inglés B2 alto, necesario para mantener conversaciones técnicas con el equipo.

Responsibilities

• Trabajar en un proyecto de integración de plataformas de datos.
• Trabajar con entornos lakehouse, pipelines de ingesta y transformación de datos.
• Gestionar administración de bases de datos y permisos.
• Dar soporte a equipos de desarrollo.

Skills

Lakehouse

SQL

RBAC

Pipelines

Kinesis

PySpark

Go

Apache Iceberg

Dagster

Inglés B2

Tools

SingleStore/MemSQL

Kafka

Apache Iceberg

Dagster

PySpark

Go

Job description

• Trabajar en un proyecto de integración de plataformas de datos, trabajando con entornos lakehouse, pipelines de ingesta y transformación de datos.
• Combinar tareas de administración de base de datos, gestión de accesos, soporte a equipos de desarrollo y creación de pipelines de datos.

Requirements

• Experiencia trabajando con Lakehouse - SingleStore / MemSQL o bases de datos distribuidas/analíticas similares.
• Conocimientos sólidos de SQL.
• Experiencia en gestión de usuarios, permisos, roles, RBAC o administración de bases de datos.
• Experiencia en creación y mantenimiento de pipelines de datos.
• Conocimientos de Kinesis o tecnologías similares de streaming como Kafka.
• Experiencia con PySpark.
• Conocimientos de entornos Lakehouse.
• Valorable experiencia con Apache Iceberg y Dagster.
• Valorable experiencia con Go.
• Inglés B2 alto, necesario para mantener conversaciones técnicas con el equipo.

Core Competencies

Demonstrates expertise in data integration projects, particularly within Lakehouse environments, and possesses strong skills in SQL, data pipeline creation, and database administration. Proficient in managing user access and permissions while supporting development teams with data transformation tasks.

Highest-signal resume keywords

• Lakehouse Experience
• SQL Proficiency
• Data Pipeline Creation
• User Management and RBAC
• PySpark Experience

ATS Optimization Keywords

Hard Skills

• SQL
• Data Pipeline Creation
• Database Administration
• User Management
• RBAC
• PySpark
• Kinesis
• Apache Iceberg
• Dagster
• Go

Tools & Technologies

• Lakehouse
• SingleStore
• MemSQL
• Kafka