Data Engineer Semi Senior

2Brains; United States; Remote; USD 90,000 - 130,000; Full time

Job summary

2Brains busca un/a Data Engineer Semi Senior para diseñar, construir y mantener pipelines de datos en AWS. Trabajarás con analítica y ciencia de datos, transformando requerimientos en soluciones técnicas robustas para grandes volúmenes.

El candidato ideal posee experiencia en Python, SQL, ETL/ELT y data pipelines, con conocimiento de herramientas AWS como S3, Glue y Redshift. Se valorará experiencia en Airflow y prácticas ágil.

Qualifications

• +3 años de experiencia en ingeniería de datos o desarrollo con foco en integración de datos.
• Experiencia sólida en Python y SQL avanzado.
• Experiencia en ecosistemas AWS: S3, Glue, Redshift, Lambda, Step Functions, Athena, EMR.
• Experiencia en construcción de pipelines ETL/ELT.
• Manejo de herramientas de orquestación (Airflow o AWS Step Functions).
• Conocimientos en modelado de datos (relacional, normalización y desnormalización).
• Experiencia en integración de múltiples fuentes de datos.
• Conocimientos en calidad de datos, monitoreo y trazabilidad (data lineage).
• Manejo de Git y flujos de trabajo colaborativos.
• Experiencia trabajando con metodologías ágiles.

Responsibilities

• Data Engineering & Pipelines: Diseñar, desarrollar e implementar pipelines de datos robustos y escalables (batch y streaming).
• ETL/ELT: Construir procesos de ingesta, transformación y carga desde múltiples fuentes.
• Integración de sistemas heterogéneos mediante flujos automatizados.
• Asegurar alimentación de data lakes y data warehouses.
• Cloud & Infraestructura: Mantener la infraestructura de datos en AWS (S3, Glue, Redshift, Lambda, Step Functions, Athena, EMR).
• Garantizar disponibilidad, performance y escalabilidad de soluciones.
• Calidad & Optimización: Implementar controles de calidad, monitoreo y data lineage; optimizar consultas y recursos.
• Documentación & Buenas Prácticas: Documentar pipelines y arquitecturas; usar Git y colaboración.
• Colaboración: Trabajar con Data Analysts, Data Scientists y stakeholders; ceremoniar ágiles.

Skills

Python

SQL

AWS

Airflow

Git

Agile

Data modeling

Data quality

Data lineage

Tools

S3

Glue

Redshift

Lambda

Step Functions

Athena

EMR

Airflow

Job description

Buscamos un/a Data Engineer Semi Senior con experiencia en entornos cloud (AWS) para diseñar, construir y mantener soluciones de datos escalables y confiables. La persona que se incorpore tendrá un rol clave en la construcción de pipelines de datos (batch y streaming), la optimización de procesos ETL/ELT y la evolución de la plataforma de datos, asegurando calidad, disponibilidad y eficiencia en el procesamiento de grandes volúmenes de información. Trabajará de forma cercana con equipos de analítica, data science y negocio, transformando requerimientos en soluciones técnicas robustas dentro de un ecosistema moderno de datos.

Responsibilities

Data Engineering & Pipelines Diseñar, desarrollar e implementar pipelines de datos robustos y escalables (batch y streaming). Construir procesos de ingesta, transformación y carga (ETL/ELT) desde múltiples fuentes de datos. Integrar sistemas heterogéneos (bases de datos, APIs, archivos) mediante flujos automatizados. Asegurar la correcta alimentación de data lakes y data warehouses.

Cloud & Infraestructura Construir y mantener la infraestructura de datos en AWS (S3, Glue, Redshift, Lambda, Step Functions, Athena, EMR). Garantizar disponibilidad, performance y escalabilidad de las soluciones implementadas. Colaborar en la definición de arquitecturas de datos modernas en la nube.

Calidad & Optimización Aplicar técnicas de limpieza, validación y estandarización de datos. Implementar controles de calidad, monitoreo y data lineage. Optimizar consultas SQL, pipelines y uso de recursos. Monitorear tiempos de carga, volúmenes y errores en producción.

Documentación & Buenas Prácticas Documentar pipelines, modelos de datos y arquitecturas. Promover buenas prácticas de ingeniería de datos. Trabajar con versionado de código (Git) y procesos colaborativos.

Colaboración Trabajar junto a Data Analysts, Data Scientists y stakeholders de negocio. Traducir requerimientos funcionales en soluciones técnicas. Participar en ceremonias ágiles (Scrum / Kanban).

Skills

Requisitos Técnicos (Excluyentes)

• +3 años de experiencia en ingeniería de datos o desarrollo con foco en integración de datos.
• Experiencia sólida en Python y SQL avanzado.
• Experiencia trabajando en ecosistemas AWS: S3, Glue, Redshift, Lambda, Step Functions, Athena, EMR.
• Experiencia en construcción de pipelines ETL/ELT.
• Manejo de herramientas de orquestación (Airflow o AWS Step Functions).
• Conocimientos en modelado de datos (relacional, normalización y desnormalización).
• Experiencia en integración de múltiples fuentes de datos.
• Conocimientos en calidad de datos, monitoreo y trazabilidad (data lineage).
• Manejo de Git y flujos de trabajo colaborativos.
• Experiencia trabajando con metodologías ágiles.

Perfil Buscado Perfil Semi Senior con buena autonomía y capacidad de ejecución. Fuerte orientación a calidad de datos y eficiencia en procesos. Pensamiento analítico y foco en resolución de problemas. Capacidad para trabajar en entornos dinámicos y colaborativos. Mentalidad de mejora continua y buenas prácticas.

Desirable

Requisitos Deseables

• Experiencia con Spark / PySpark sobre EMR.
• Conocimiento de dbt u otras herramientas de transformación.
• Experiencia en procesamiento en tiempo real (Kafka o Kinesis).
• Experiencia con Terraform o Infrastructure as Code.
• Certificaciones AWS (Data Analytics, Solutions Architect).