Data Engineer

Quantori; Murcia; Presencial; EUR 55.000 - 75.000; Jornada completa

Ventajas ofrecidas por este puesto de trabajo

Fully remote work

Flexible hours

Continuous education

Descripción de la vacante

Quantori busca un/a Data Engineer para un proyecto en Life Science, centrado en construir pipelines de datos y aprovechar tecnologías en la nube. Trabajará en un entorno de big data con Azure, Databricks, Spark y Python, diseñando soluciones end-to-end.

Se requieren más de 5 años de experiencia, sólidas habilidades en SQL y en Data Lakes/ Warehouses, y capacidad analítica para transformar datos complejos. Ofrecemos trabajo 100% remoto, horarios flexibles y oportunidades de formación continua.

Formación

• 5+ años de experiencia en Ingeniería de Datos.
• Experiencia con Spark.
• Experiencia con Databricks.
• Experiencia trabajando con Azure Cloud.
• Habilidades fuertes en SQL.
• Experiencia construyendo Data Lakes/Data Warehouses y soluciones ETL.
• Conocimiento de estructuras de datos y modelado de datos.
• Habilidades analíticas y de resolución de problemas.

Responsabilidades

• Organización y análisis de datos: estructurados, semiestructurados, no estructurados e imágenes.
• Construcción de sistemas y pipelines de datos.
• Preparar datos para modelado prescriptivo y predictivo.
• Diseñar pipelines end-to-end en una arquitectura de big data híbrida, usando Azure, Databricks, Spark, Scala, sbt, Airflow, Python, SQL, etc.
• Aprovechar servicios de Azure para construir pipelines de datos y garantizar monitoreo efectivo.

Conocimientos

Spark

Databricks

Azure Cloud

SQL

ETL design

Data lake/warehouse

Data modeling

Python

Airflow

Scala

Herramientas

Azure Cloud

Databricks

Spark

Airflow

Python

SQL

Descripción del empleo

Data Engineer Quantori•Murcia, región de murcia, Spain

Descripción del trabajo

At Quantori we are seeking a Data Engineer for an ongoing Life Science project to be engaged in building data pipelines and leveraging cloud technologies.

The team works in the Central European Time.

Responsibilities:

• Data organization and analysis: handling structured, semi-structured, unstructured, and image-based data.
• Building data systems and pipelines
• Preparing data for prescriptive and predictive modeling
• Designing end-to-end pipelines within a hybrid big data architecture, using Cloud Native Azure, Databricks, Spark, Scala, sbt, Airflow, Python, SQL, etc.
• Leveraging Azure Cloud services for building data pipelines and ensuring effective monitoring

What we expect:

• 5+ years of relevant experience in the Data Engineering field
• Expertise in Spark
• Expertise in Databricks
• Experience in working with Azure Cloud
• Strong SQL skills
• Experience with building Data lakes, Data warehouses, and ETL solutions
• Understanding of data structures, data modeling, and software architecture
• Analytic and problem solving skills

Nice to have:

• Expertise with Snowflake xkdbapo and related technologies (e.g. dbt)
• Ability to write robust code with Scala
• Proficiency with public clouds (AWS, GCP, Azure)

We offer:

• Competitive compensation
• Fully remote work
• Flexible working hours
• Continuous education, mentoring, and professional development programs
• A team with an excellent tech expertise