Data Engineer – Cloud & Databricks

Bismart, Business Intelligence Specialist Services; Barcelona; Híbrido; EUR 45.000 - 75.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Trabajo híbrido

Proyectos internacionales

Formación continua

Descripción de la vacante

Bismart, una consultora de negocio con base tecnológica, busca un Data Engineer para proyectos de transformación y explotación de datos, trabajando con Azure y AWS y Databricks.

Se valorará experiencia en pipelines ETL/ELT, arquitecturas de datos cloud y entornos Lakehouse. Ubicación Barcelona o Madrid, modelo de trabajo híbrido, proyectos internacionales.

Formación

• Diseño y desarrollo de pipelines de datos y procesos ETL/ELT.
• Participación en arquitecturas de datos cloud.
• Desarrollo de ingestión, transformación y procesamiento de datos.
• Trabajar con Azure y/o AWS.
• Desarrollo con Spark/PySpark.
• Trabajo con Databricks en ingeniería de datos.
• Consultas en SQL y Python.
• Arquitecturas Data Lake / Lakehouse.
• Soluciones escalables y eficientes para procesamiento de datos.
• Monitoreo y optimización de pipelines.
• Colaboración en proyectos con clientes y equipos.
• Trabajo en proyectos internacionales (reuniones y equipos multiculturales).
• Capacidad para trabajar en equipo y resolver problemas.

Responsabilidades

• Diseñar, desarrollar y mantener pipelines de datos y procesos ETL/ELT.
• Participar en el diseño e implementación de arquitecturas de datos cloud.
• Desarrollar procesos de ingesta, transformación y procesamiento de datos.
• Trabajar con Azure y/o AWS.
• Desarrollar soluciones con Apache Spark / PySpark.
• Trabajar con Databricks en procesos de ingeniería y transformación de datos.
• Desarrollar consultas y procesos con SQL y Python.
• Trabajar con Data Lake / Lakehouse.
• Diseñar soluciones escalables, eficientes y robustas para procesamiento de datos.
• Monitorizar y optimizar pipelines y procesos de datos.
• Participar en proyectos de clientes, colaborando con equipos técnicos y de negocio.
• Trabajar en proyectos internacionales, colaborando con clientes y equipos de diferentes países.

Conocimientos

SQL

Python

Databricks

Apache Spark / PySpark

Azure

AWS

ETL / ELT pipelines

Data Lake / Lakehouse

Cloud architectures

English (C1)

Educación

Ingeniería Informática

Ingeniería de Datos

Matemáticas

Física

Estadística

Telecomunicaciones

Herramientas

Databricks

Delta Lake

Terraform

Git

Apache Airflow

Microsoft Fabric

Kafka

Kinesis

Azure

AWS

Descripción del empleo

En Bismart somos una consultora de negocio con base tecnológica especializada en Data Management & Analytics, analítica avanzada, Inteligencia Artificial y gobierno del dato.

Buscamos incorporar un/a Data Engineer para participar en proyectos de transformación y explotación de datos, trabajando con diferentes tecnologías y arquitecturas cloud, principalmente en entornos Microsoft Azure y AWS, así como con Databricks.

Buscamos un perfil técnico con experiencia en ingeniería de datos, acostumbrado a trabajar con grandes volúmenes de información y capaz de participar en proyectos de datos de principio a fin.

El perfil que buscamos puede estar ubicado en Barcelona o Madrid.

• Diseñar, desarrollar y mantener pipelines de datos y procesos ETL/ELT.
• Participar en el diseño e implementación de arquitecturas de datos cloud.
• Desarrollar procesos de ingesta, transformación y procesamiento de datos.
• Trabajar con diferentes servicios y tecnologías de Microsoft Azure y/o AWS.
• Desarrollar soluciones de procesamiento de datos utilizando Apache Spark / PySpark.
• Trabajar con Databricks en procesos de ingeniería y transformación de datos.
• Desarrollar consultas y procesos utilizando SQL y Python.
• Trabajar con arquitecturas Data Lake / Lakehouse.
• Diseñar soluciones escalables, eficientes y robustas para el procesamiento de datos.
• Monitorizar y optimizar pipelines y procesos de datos.
• Participar en proyectos de clientes, colaborando con equipos técnicos y de negocio.
• Trabajar en proyectos internacionales, participando en reuniones y colaborando con clientes y equipos de diferentes países.
• Formación universitaria en Ingeniería Informática, Ingeniería de Datos, Matemáticas, Física, Estadística, Telecomunicaciones o similar.
• Experiencia profesional como Data Engineer.
• Experiencia en el diseño y desarrollo de procesos ETL/ELT y pipelines de datos.
• Experiencia trabajando con entornos cloud, especialmente Microsoft Azure y/o AWS.
• Conocimientos y experiencia con herramientas y servicios de datos en cloud, como:
• Experiencia con Databricks.
• Conocimientos sólidos de Apache Spark / PySpark.
• Buen nivel de SQL.
• Experiencia con Python aplicado a procesos de datos.
• Conocimientos de arquitecturas Data Lake / Lakehouse.
• Inglés alto (mínimo C1), tanto oral como escrito, imprescindible para participar en proyectos internacionales y trabajar directamente con clientes y equipos internacionales.
• Capacidad para trabajar en equipo, autonomía y orientación a la resolución de problemas.

Se valorará especialmente

• Experiencia trabajando tanto con Azure como con AWS.
• Experiencia avanzada con Databricks y Delta Lake.
• Conocimientos de Unity Catalog.
• Experiencia con herramientas de orquestación como Apache Airflow o AWS Step Functions.
• Experiencia con Microsoft Fabric.
• Conocimientos de Terraform, Git y CI/CD.
• Experiencia con tecnologías de streaming como Kafka o Amazon Kinesis.
• Certificaciones de Azure, AWS o Databricks.
• Experiencia previa en proyectos internacionales o entornos multiculturales.
• Incorporación a una compañía especializada en Data & Analytics, IA y gobierno del dato.
• Posibilidad de trabajar con diferentes tecnologías y arquitecturas cloud.
• Proyectos nacionales e internacionales.
• Entorno de trabajo dinámico y multidisciplinar.
• Modelo de trabajo híbrido.
• Desarrollo profesional y formación continua.