Senior Big Data Tech Lead - AWS, Spark, Python (Remote)

Teletrabajo; Chile; Remote; CLP 117,302,000 - 166,178,000; Full time

Benefits offered by this job

SoftServe University

Medical insurance

Food vouchers

Extra days off

Dare to Care program

Anniversary Program

Job summary

SoftServe, una empresa global de servicios digitales, busca ampliar su equipo de Data & Analytics para apoyar una plataforma de datos basada en AWS. El rol involucra ingesta de datos, procesamiento y mejoras de fiabilidad.

Se trabajará con equipos distribuidos y datos del sector sanitario en un entorno regulado, con viaje de negocios a Estados Unidos en Q1 2027. Se requieren 5+ años en Big Data/Data Engineering, Python, PySpark, Spark y experiencia con servicios AWS como Glue, S3 y Lambda.

Qualifications

• 5+ years de experiencia en Big Data o Data Engineering.
• Dominio de Python, PySpark y Apache Spark para procesamiento a gran escala.
• Experiencia con servicios de datos de AWS (Glue, S3, Athena, Aurora PostgreSQL, Lambda).
• Conocimiento de Airflow para orquestación de pipelines de datos.
• SQL, ingesta de datos, ETL y prácticas de calidad de datos.

Responsibilities

• Soportar, mantener y mejorar una plataforma de datos basada en AWS.
• Desarrollar y optimizar flujos de procesamiento con Python, PySpark, Spark y AWS Glue.
• Monitorear y depurar pipelines para asegurar fiabilidad y calidad.
• Trabajar con servicios AWS: S3, Aurora PostgreSQL, Athena, Lambda, SQS, SNS, EventBridge.
• Mantener y mejorar la orquestación con Apache Airflow.
• Soportar procesos de infraestructura con Docker, Terraform y EKS.

Skills

Python

PySpark

Apache Spark

SQL

Airflow

Docker

Terraform

CI/CD

GitHub Actions

English communication

Tools

Docker

Terraform

GitHub Actions

Job description

SoftServe, una empresa global de servicios digitales, busca ampliar su equipo de Data & Analytics para apoyar una plataforma de datos basada en AWS. El rol involucra ingesta de datos, procesamiento y mejoras de fiabilidad.

Se trabajará con equipos distribuidos y datos del sector sanitario en un entorno regulado, con viaje de negocios a Estados Unidos en Q1 2027. Se requieren 5+ años en Big Data/Data Engineering, Python, PySpark, Spark y experiencia con servicios AWS como Glue, S3 y Lambda.