Data Engineer Python/SQL/Kafka

DaCodes; México; A distancia; MXN 30,000 - 70,000; Jornada completa

Descripción de la vacante

Una empresa innovadora en el ámbito de la tecnología busca un Data Engineer apasionado por el análisis y la creación de soluciones. En este rol, tendrás la oportunidad de trabajar en proyectos desafiantes, desarrollando procesos ETL y modelando datos relacionales y no relacionales. Colaborarás con equipos multidisciplinarios y contribuirás al diseño de soluciones escalables utilizando Python y AWS. Con un enfoque en el crecimiento profesional y la colaboración, esta es una oportunidad emocionante para aquellos que buscan hacer una diferencia en el mundo de la tecnología.

Servicios

Potencial de crecimiento

Colaboración en proyectos importantes

Ambiente de trabajo flexible

Formación

• Experiencia sólida en Ingeniería de datos y modelado de bases de datos.
• Excelentes habilidades de programación en Python y ETL.
• Experiencia en servicios de AWS orientados a datos.

Responsabilidades

• Desarrollar procesos de extracción, transformación y carga (ETL).
• Diseñar e implementar pipelines de ingesta y procesamiento de datos.
• Colaborar con desarrolladores y científicos de datos en buenas prácticas.

Conocimientos

Ingeniería de datos

Modelado de Bases de Datos (PostgreSQL)

Bases de datos no relacionales (MongoDB, Cassandra, Redis)

Programación en Python

ETL con Python, Spark, PySpark, Hadoop, MapReduce, Kafka

Servicios de AWS (Glue, EMR, Redshift, Firehose)

Git

Linux scripting (bash, ksh)

Colaboración en equipo

Metodologías ágiles (Scrum)

Herramientas

AWS Services

Spark

Kafka

Descripción del empleo

¿Alguien dijo retos?
DaCodes es una empresa dedicada al diseño y desarrollo de plataformas tecnológicas, Apps y Web. Expertos en transformación digital y desarrollo de software de alto impacto. Por 6 años ha creado soluciones enfocadas en la tecnología e innovación.Estamos buscando Data Engineer para unirse al equipo. Si eres curioso, tienes el don del análisis en tus venas y sientes esa pasión por crear soluciones, entonces esto te interesa.

Esta vacante seguro es para ti si tienes:

• Experiencia sólida en Ingeniería de datos.
• Experiencia en Modelado de Bases de Datos, deseable -PostgreSQL.
• Conocimientos básicos en bases de datos no relacionales, deseable MongoDB, Cassandra, Redis.
• Excelentes habilidades de programación en Python y sus librerías.
• Habilidades de programación ETL utilizando herramientas como Python, Spark, PySpark, Hadoop, MapReduce o Kafka intermedio-deseable tener experiencia con Confluent y KSQL
• Experiencia trabajando con servicios de AWS orientados a Datos (Glue, EMR, Redshift, Firehose, etc).
• Experiencia desarrollando soluciones usando AWS Services (EMR, EC2,RDS, Lambda, etc.)
• Uso de Git
• Conocimientos en linux scripting (bash, ksh).
• Tienes experiencia y soltura trabajando en ambientes colaborativos.
• Eres flexible y abierto a nuevos retos con una apertura al aprendizaje continuo.
• Eres un excelente team player y tienes un espíritu crítico combinado con una actitud positiva para la resolución de problemas.
• Disfrutas colaborar con otros ingenieros sobre la arquitectura y compartir la experiencia de diseñar en equipo.
  
  

Super plus si:

• Has trabajado en equipos con metodologías de trabajo ágiles (Scrum)
• Dominas el trabajo con servicios en la nube.
• Eres un pez en el agua colaborando en equipo no sólo de Científicos de Datos sino de Negocio, de Producto y de Ingeniería. Te sabes nutrir de todos ellos para construir soluciones al negocio.
  
  

Te encantará porque:

• Tendrás un enorme potencial de crecimiento dentro de DaCodes y además colaborarás en diversos proyectos con las compañía más importantes de su sector respaldadas por los principales fondos de inversión en América Latina.

Te encargarás de:

• Desarrollar procesos de extracción, transformación y carga (ETL).
• Modelado de datos relacionales y no relacionales.
• Diseñar e implementar pipelines de ingesta, procesamiento y transformación para requerimientos escalables integrando datos de distintas fuentes y utilizando mayormente Python y el stack de AWS.
• Sincronización de datos en tiempo real
• Analizar, diagnosticar y prescribir soluciones a cuellos de botella en data workflows.
• Trabajar codo a codo con desarrolladores y científicos de datos para la implementación de buenas prácticas, políticas de institucionalización, pipelines, métricas, selección de herramientas y plataformas en el marco de MLOps.
• Contribuir con el equipo para el diseño e implementación de medidas de monitoreo, alerta y corrección que aseguren la calidad de los datos.
• Implementar técnicas de Gobierno de Datos.
• Contribuir en la implementación de un sistema de control de versiones para el equipo de Datos.
  
  ¡Esperamos que pronto formes parte del Team!