Cloud Data Engineer Senior

Paradigma Digital; United States; Hybrid; USD 120,000 - 160,000; Full time

Benefits offered by this job

Seguro médico

Retribución flexible

25 días de vacaciones

Bienestar

Job summary

Paradigma Digital está buscando un Senior Data Engineer para unirse a su área de Data y participar en proyectos basados en cloud. Se esperan responsabilidades de diseño de pipelines, ingestión, procesamiento y calidad de datos, con foco en ingestión batch y streaming y orquestación de flujos como Airflow o equivalentes.

El candidato debe dominar Python, diseño y optimización de pipelines, y experiencia en herramientas de orquestación y procesamiento de datos en entornos cloud.

Qualifications

• Experiencia en proyectos con grandes volúmenes de datos.
• Experiencia en entornos Cloud (AWS, Azure y/o GCP).
• Desarrollo en Python.
• Experiencia con Apache Airflow.
• Conocimiento de Kafka o sistemas de streaming.

Responsibilities

• Diseño e implementación de pipelines de datos: ingestion, procesamiento y transformación.
• Recolección y almacenamiento de datos de múltiples fuentes.
• Limpieza y preprocesamiento para análisis con alta calidad de datos.
• Optimización y escalabilidad de bases de datos.

Skills

Cloud

Python

Apache Airflow

Kafka

Job description

¡Forma parte del futuro de Paradigma!

Buscamos un Senior Data Engineerpara participar en un proyecto de nuestro área de Data con experiencia en mantenimiento, optimización, integración , gestión del ciclo de vida y calidad del dato basado en cloud.

¿Que buscamos?

Buscamos un Data Engineer Senior con experiencia en construcción de pipelines, diseño, desarrollo y optimización de datos complejos basado en cloud AWS, Azure y/o GCP.

Responsabilidades

• Diseño e implementación de pipelines de datos: Crear y estructurar procesos para la ingestión, procesamiento y transformación de datos.
• Recolección y almacenamiento de datos: Implementar soluciones para la captura y almacenamiento eficiente de datos provenientes de diversas fuentes.
• Limpieza y preprocesamiento de datos: Asegurar que los datos estén limpios y listos para su análisis, aplicando técnicas de limpieza y transformación.
• Optimización de bases de datos: Ajustar bases de datos para mejorar su rendimiento y escalabilidad.
• Integración de datos: Facilitar la correcta integración de datos provenientes de distintas fuentes.
• Mantenimiento de sistemas de datos: Asegurar el funcionamiento continuo y eficiente de los sistemas de datos.
• Monitorización y ajuste de flujos de datos: Supervisar y ajustar los pipelines y flujos de datos para mantener su rendimiento y confiabilidad.
• Calidad del dato: Implementar y mantener prácticas para asegurar la precisión, consistencia y fiabilidad de los datos.
• Gestión del ciclo de vida del dato: Gestionar el ciclo de vida de los datos desde su creación hasta su eventual archivado y eliminación.
• Orquestación de pipelines de datos: Implementar y gestionar herramientas de orquestación de flujos de trabajo como Apache Airflow, AWS Step Functions, o Google Cloud Composer para asegurar la automatización y eficiencia de los pipelines de datos.
• Ingesta de datos Batch y/o Streaming: Desarrollar e implementar procesos de ingestión de datos en lotes y en tiempo real utilizando herramientas como Apache Kafka, Change Data Capture (CDC), y AWS Kinesis.

Debes tener experiencia en:

• Proyectos con grandes volúmenes de datos como Data Engineer
• Cloud
• Desarrollo Python
• Apache Airflow
• Kafka

¿Por qué Paradigma?

Libertad con responsabilidad
Confiamos en las personas para organizar su trabajo de forma flexible, favoreciendo el equilibrio entre la vida personal y profesional sin perder de vista los objetivos y el impacto de nuestro trabajo. Tendrás la posibilidad de trabajar en un modelo de trabajo remoto o híbrido.

Una comunidad de referencia
Formarás parte de una comunidad ágil y tecnológica activa, donde compartir conocimiento, aprender de otros expertos y contribuir al desarrollo de las mejores prácticas del sector.

Acompañamiento desde el primer día

Contarás con el apoyo de un Buddy que te ayudará en tu integración, resolverá tus dudas y facilitará que te sientas parte de Paradigma desde el inicio.

Excelencia técnica como seña de identidad
Nos apasiona la tecnología y apostamos por el desarrollo continuo de nuestras capacidades. El conocimiento, la calidad y la mejora constante forman parte de nuestra cultura.
También apostamos por el aprendizaje continuo y tendrás acceso a un plan anual de formación, certificaciones oficiales y espacios de aprendizaje diseñados para impulsar tu desarrollo profesional.

Beneficios
Además de un entorno de trabajo cercano y colaborativo, ofrecemos seguro médico 100% subvencionado, retribución flexible a través de Edenred, 25 días de vacaciones anuales y otros beneficios orientados al bienestar de las personas.

Conócenos mejor aquí: YouTube Paradigma Digital

Nuestro compromiso con la diversidad e inclusión:
En Paradigma, la igualdad es clave. Creamos un entorno donde todas las personas son bienvenidas, independientemente de género, edad, religión, orientación sexual o cualquier otra condición. Trabajamos para garantizar la igualdad salarial y de oportunidades.
Se valorará certificado de discapacidad.

Contacta con nosotros en [e-mail]