Ingeniero/a sénior de datos - Terminal.exe

All Your BI; Rotterdam; Remote; EUR 85,000 - 99,000; Full time

Benefits offered by this job

Salario anual 85k–99k EUR

Desarrollo profesional 5.000 EUR/año

Vacaciones 25 días + opción 10 más

Viajes internacionales

Equipo para trabajo remoto

Trabajo remoto dentro de Europa

Job summary

All Your BI busca un ingeniero de datos senior para diseñar y crear pipelines que muevan datos de terminales hacia nuestra plataforma basada en Azure. Coordinarás la transformación de datos y la arquitectura multiinquilina.

Se valorará experiencia con Navis N4, SQL Server y PostgreSQL, así como pipelines ELT y métodos de streaming. Se ofrece salario competitivo, desarrollo profesional, viajes y trabajo remoto en Europa.

Qualifications

• 5+ años de experiencia en ingeniería de datos, con responsabilidad de plataformas de datos en producción.
• Experiencia sólida con SQL y Python; valoramos Go y conectores en Go.
• Conocimiento de Azure y bases de datos (Azure PostgreSQL/SQL Server).
• Experiencia con pipelines ELT, procesamiento en streaming o CDC.

Responsibilities

• Diseñarás y crearás pipelines ELT desde bases de datos locales a la plataforma en Azure.
• Desarrollarás la capa de transformación para datos operativos en conjuntos depurados.
• Mantendrás arquitectura multiinquilino con capas STG → ODS → DataMart.
• Trabajarás con herramientas internas para conectores escritos en Go.
• Supervisarás la calidad de datos, lagunas y reconciliación.

Skills

Data engineering

SQL

Python

Go

Azure

PostgreSQL

Education

Bachelor degree in Computer Science or equivalent

Tools

Navis N4

Kafka

Azure Event Hubs

Azure AKS

Azure DevOps

Argo CD

OpenTelemetry

SQL Server

Job description

Puede que te llames ingeniero/a sénior de datos, arquitecto/a de pipelines, especialista en «por qué estos datos del TOS son un desastre»… o puede que simplemente te llames Sam. Sea cual sea el nombre que uses, te unirás a Terminal.exe, la plataforma de datos nativa de IA de All Your BI para operadores de terminales de contenedores, y construirás su núcleo: los pipelines y el modelo de datos que convierten datos fragmentados y poco fiables de las terminales en información con la que los operadores organizan su trabajo diario.

Qué te ofrecemos

• Un salario de entre 85.000 € y 99.000 € al año, incluida la paga de vacaciones, en función de tu experiencia.

• 5.000 € al año para tu propio desarrollo, con voz y voto reales sobre cómo gastarlos.

• 25 días de vacaciones + la opción de comprar hasta 10 más + festivos locales + la opción de disfrutar de un año sabático de hasta 4 meses.

• Dos viajes al extranjero al año con todo el equipo + alguna que otra copa y actividad de equipo.

• 500 € para equipamiento de oficina en casa y un portátil estupendo.

• Un merecido «¡Eh, muy bien, Buddy!», de vez en cuando.

• Trabajo totalmente remoto, dentro de Europa.

Beneficios en toda la UE: las ventajas anteriores son de AYBI y están disponibles para todo el mundo, en todas partes. Las prestaciones legales (pensión, sanidad, seguridad social, permisos, baja por enfermedad y preaviso) dependen del país de contratación y se rigen por el contrato local o por el EOR.

Quiénes somos

All Your BI es una agencia de datos con prioridad por el trabajo remoto, con sede en Róterdam. Desde 2019 hemos pasado de ser una consultora boutique a convertirnos en un equipo internacional de datos de más de 60 profesionales repartidos por Europa. Prestamos servicios de BI gestionados para empresas de logística e industria, ayudándolas a reducir el desperdicio de datos y a avanzar. Nos encanta el momento WOW: ese brillo en los ojos de los usuarios cuando obtienen nuevos conocimientos y descubren oportunidades.

Acerca de Terminal.exe

Terminal.exe es la plataforma SaaS de All Your BI para terminales de contenedores. Unifica datos fragmentados de TOS, mantenimiento, accesos y sensores en un modelo gobernado, para que todas las instalaciones trabajen con las mismas cifras, en lugar de reconstruir sus propios informes desde cero. La plataforma está creciendo rápidamente. Ayudarás a dar forma a los fundamentos de ingeniería que deben escalar a continuación: arquitectura de datos multiinquilino, pipelines casi en tiempo real procedentes de operaciones 24/7 y un modelo de datos estandarizado que funcione en terminales de todo el mundo.

En qué consiste el puesto

Diseñarás y crearás los pipelines que trasladan datos de sistemas operativos de terminales (como Navis N4) a nuestra plataforma, así como la capa de transformación que convierte los datos operativos sin procesar en conjuntos de datos depurados y documentados.

En concreto, trabajarás en:

• Pipelines ELT desde bases de datos locales de terminales hasta nuestra plataforma basada en Azure, con actualizaciones casi en tiempo real (micro-lotes de 3 minutos) para informes operativos y procesamiento por lotes diario para analítica. La extracción utiliza consultas incrementales basadas en marcas de agua sobre Kafka (Azure Event Hubs) hacia una instancia de PostgreSQL para el entorno de staging.

• Una arquitectura de datos multiinquilino en Azure PostgreSQL, con aislamiento mediante una base de datos por inquilino y una estructura estandarizada de capas STG → ODS → DataMart, impulsada por nuestro framework declarativo interno de transformación (dewi).

• Nuestro conjunto de herramientas interno para conectores, escrito en Go, que ayudarás a desarrollar y ampliar.

• Supervisión de la calidad de los datos: detección de lagunas, alertas de actualización y conciliación.

• El modelo de datos estandarizado para terminales: asignar datos de origen de distintas versiones y configuraciones de TOS a definiciones compartidas de movimientos, escalas y eventos de equipos.

Trabajarás directamente con el personal de operaciones de las terminales, sin intermediarios.

Qué aportarás

• Actitud y experiencia: curiosidad y ganas genuinas de asumir la responsabilidad de la arquitectura, además de 5+ años de experiencia en ingeniería de datos, incluida la responsabilidad integral de plataformas de datos en producción. Este producto está en desarrollo activo, así que necesitamos que te sientas a gusto tomando decisiones, no solo ejecutándolas.

• Stack principal: sólidos conocimientos de SQL y Python; la experiencia con Go es una gran ventaja (nuestros conectores y consumidores están escritos en Go). Experiencia sólida con SQL Server como sistema de origen y PostgreSQL como almacén de destino.

• Pipelines y streaming: experiencia en la creación y operación de pipelines ELT para sistemas operativos de origen, incluidos métodos de extracción basados en marcas de agua, incrementales o CDC/réplicas, y experiencia con arquitecturas basadas en eventos o de streaming. Utilizamos Azure Event Hubs con un endpoint compatible con Kafka.

• Nube y observabilidad: experiencia con plataformas de datos en la nube sobre Azure; conocer AKS, Azure DevOps CI/CD y GitOps (Argo CD) es una ventaja. También es importante que pongas un gran énfasis en la precisión de los datos y la instrumentación; utilizamos OpenTelemetry.

• Se valorará: conocimiento del sector de las terminales de contenedores o de la logística portuaria, experiencia directa con Navis N4 u otro TOS, experiencia con arquitecturas de datos SaaS multiinquilino y familiaridad con frameworks declarativos de transformación basados en YAML. Conocer el sector es una gran ventaja, pero no es un requisito imprescindible: te enseñaremos cómo funciona el ámbito de las terminales.

Somos un equipo en crecimiento repartido por Europa y contratamos para ampliar esa diversidad, no para reducirla. Lo que importa es lo que sabes hacer y la perspectiva que aportas, no tu edad, género, etnia, orientación, discapacidad, origen ni dónde estudiaste.

education_code: bachelor_degree

experience_code: experienced

min_hours_per_week: 40

max_hours_per_week: 40

Salario: EUR 85000–99000 al año