Senior Data Engineer — Remote with PySpark/Scala Pipelines

Zemsania; United States; Remote; USD 100,000 - 150,000; Full time

Benefits offered by this job

Trabajo 100% remoto

Desarrollo profesional

Proyectos innovadores

Equipo dinámico

Job summary

Zemsania busca un Data Engineer con al menos 5 años de experiencia para diseñar, construir y mantener arquitecturas de datos escalables que permitan el análisis y la toma de decisiones.

Serán clave los pipelines robustos, la optimización de ETL/ELT y la garantía de calidad de los datos, trabajando con Scala y PySpark para procesamiento batch y en tiempo real.

Ofrecemos 100% remoto, salario competitivo, desarrollo profesional y proyectos innovadores en un equipo dinámico.

Qualifications

• Experiencia demostrable de al menos 5 años en ingeniería de datos.

Responsibilities

• Diseñar, construir y mantener pipelines de datos eficientes y escalables utilizando Scala y PySpark.
• Desarrollar e implementar soluciones de procesamiento de datos en batch y en tiempo real.
• Colaborar estrechamente con científicos de datos, analistas y otros stakeholders para comprender sus necesidades de datos y traducirlas en soluciones técnicas.
• Optimizar el rendimiento de las bases de datos y los procesos de procesamiento de datos.
• Garantizar la calidad, consistencia y fiabilidad de los datos a lo largo de todo el ciclo de vida.
• Participar en la selección y evaluación de nuevas tecnologías y herramientas de Big Data.
• Documentar la arquitectura de datos, los procesos y las soluciones implementadas.
• Identificar y resolver problemas relacionados con la ingesta, el almacenamiento y el procesamiento de datos.
• Mantenerse al día con las últimas tendencias y mejores prácticas en ingeniería de datos.
• Contribuir a la cultura de mejora continua dentro del equipo de datos.

Tools

Scala

PySpark

Job description

Zemsania busca un Data Engineer con al menos 5 años de experiencia para diseñar, construir y mantener arquitecturas de datos escalables que permitan el análisis y la toma de decisiones.

Serán clave los pipelines robustos, la optimización de ETL/ELT y la garantía de calidad de los datos, trabajando con Scala y PySpark para procesamiento batch y en tiempo real.

Ofrecemos 100% remoto, salario competitivo, desarrollo profesional y proyectos innovadores en un equipo dinámico.