Senior Data Engineer AWS Serverless & Airflow - Remoto

Unavailable; La Pampa; Hybrid; ARS 1,200,000 - 2,000,000; Full time

Job summary

Darwoft busca un Senior Data Engineer para diseñar, construir y operar una plataforma de datos en AWS serverless, orquestada con Apache Airflow y gestionada como código. El rol implica autonomía para decidir servicios, optimizar costos y establecer buenas prácticas en toda la plataforma.

Requisitos clave incluyen experiencia avanzada en AWS serverless, Airflow y CI/CD, junto con habilidades en Snowflake, dbt y herramientas de IaC.

Qualifications

• +3 años de experiencia como Data Engineer en entornos cloud productivos.
• AWS serverless (excluyente, nivel avanzado)
• Apache Airflow (excluyente, nivel avanzado)
• CI/CD y control de versiones (GitLab)
• Infraestructura como código (Terraform, AWS CDK/CloudFormation)
• Ingeniería de datos: Snowflake, dbt, Python, Spark/PySpark
• Parquet y Iceberg sobre Glue Catalog
• Ingesta multi-fuente con dlt
• Agentes: experiencia con Agent Core o conocimiento de arquitecturas de agentes

Responsibilities

• Diseñar, construir y operar la plataforma de datos sobre AWS serverless, eligiendo cada servicio según el caso de uso, el costo y la operabilidad.
• Desarrollar DAGs de Airflow de punta a punta, con foco en idempotencia, reintentos, SLAs y manejo de fallos.
• Configurar y operar MWAA: dependencias, plugins, escalado de workers y despliegues blue/green.
• Orquestar desde Airflow jobs de Glue, Lambda, ECS y Step Functions, e integrar dbt (vía Cosmos) y dlt.
• Implementar ingesta multi-fuente con dlt y Python: APIs REST y GraphQL, Microsoft Graph, Cost Explorer, SharePoint, bases de datos y archivos.
• Diseñar y mantener el data lake / lakehouse en S3 con Parquet y Apache Iceberg sobre Glue Catalog.
• Modelar datos en Snowflake y dbt por capas, con tests y documentación.
• Desarrollar procesamiento con Spark / PySpark garantizando escrituras idempotentes y particionado eficiente.
• Aprovisionar la infraestructura como código con Terraform y/o AWS CDK / CloudFormation: entornos MWAA, Glue jobs, Lambdas, buckets S3, roles IAM y permisos de Lake Formation.
• Construir y mantener pipelines de GitLab CI/CD con separación de entornos (dev / staging / prod) y despliegues controlados por rama.
• Aplicar seguridad de mínimo privilegio, gobierno de datos con Lake Formation y manejo seguro de secretos.
• Implementar observabilidad con CloudWatch (logs, métricas, alarmas) y testing de DAGs.
• Optimizar costos de la arquitectura serverless aplicando prácticas de FinOps.

Skills

AWS serverless

Apache Airflow

CI/CD

Python

Tools

MWAA

Glue

S3

Snowflake

dbt

Terraform

AWS CDK

CloudFormation

Job description

Darwoft busca un Senior Data Engineer para diseñar, construir y operar una plataforma de datos en AWS serverless, orquestada con Apache Airflow y gestionada como código. El rol implica autonomía para decidir servicios, optimizar costos y establecer buenas prácticas en toda la plataforma.

Requisitos clave incluyen experiencia avanzada en AWS serverless, Airflow y CI/CD, junto con habilidades en Snowflake, dbt y herramientas de IaC.