Remote Senior Data Engineer: Cloudera to GCP Migration

Tecdata Engineering; United States; Presencial; USD 120.000 - 170.000; Jornada completa

Descripción de la vacante

Tecdata Engineering busca un Data Engineer senior con experiencia sólida en migraciones de Cloudera a Google Cloud Platform (GCP). El rol es remoto y requiere habilidades avanzadas en HDFS, Spark/Scala, y soluciones de nube como Dataproc, Kafka gestionado en GCP y governance de datos.

El candidato trabajará en migración, validación y optimización de pipelines de datos en entornos cloud, asegurando cumplimiento de políticas y seguridad de datos a través de herramientas como Dataplex, Cloud IAM y

Formación

• Experiencia en migración de Cloudera a Google Cloud Platform (GCP).
• Migración, validación y optimización de pipelines de datos en entornos cloud.
• Conocimientos de gobernanza de datos y seguridad en la nube.

Responsabilidades

• Liderar la migración de Cloudera a GCP y validar resultados.
• Diseñar, implementar y optimizar pipelines de datos en Dataproc y Dataproc Serverless.
• Asegurar cumplimiento de políticas de seguridad, gobierno del dato y gestión de metadatos.

Conocimientos

HDFS

Google Cloud Storage

Apache Spark

Scala

PySpark

Dataproc

Dataproc Serverless

Spark Streaming

Apache Kafka

Kudu

BigQuery

Cloud SQL

Google Spanner

Bigtable

Hive Metastore

Apache Ranger

Gobierno del dato

Dataplex

Cloud IAM

BigQuery Policy Tags

Descripción del empleo

Tecdata Engineering busca un Data Engineer senior con experiencia sólida en migraciones de Cloudera a Google Cloud Platform (GCP). El rol es remoto y requiere habilidades avanzadas en HDFS, Spark/Scala, y soluciones de nube como Dataproc, Kafka gestionado en GCP y governance de datos.

El candidato trabajará en migración, validación y optimización de pipelines de datos en entornos cloud, asegurando cumplimiento de políticas y seguridad de datos a través de herramientas como Dataplex, Cloud IAM y