Architecte Technique Senior BigData – Azure / Databricks (H/F) (IT) / Freelance

Ridcha Data; Paris; Sur place; EUR 90 000 - 130 000; Plein temps

Résumé du poste

Free-Work recherche un Architecte Technique Senior pour piloter l'architecture de use cases Big Data sur Azure et Databricks (in ingestion et exposition BI). Vous co-administrerez Unity Catalog et les workspaces Databricks, concevrez des pipelines PySpark et assurerez sécurité, RGPD et optimisation des performances et coûts.

Le poste demande un leadership technique et une collaboration étroite avec les data engineers et les équipes Ops pour garantir un runbook fiable et des livrables de qualité.

Qualifications

• Architecte technique senior avec expérience Big Data sur Azure.
• Maîtrise de Databricks, Unity Catalog et gouvernance des données.
• Connaissance RGPD et sécurité des données.

Responsabilités

• Concevoir et piloter l'architecture technique des use cases data (ingestion batch et temps réel, exposition BI).
• Co-administrer Unity Catalog et les workspaces Databricks en production (gouvernance, RBAC, lineage, audit).
• Concevoir des pipelines Databricks industrialisés (PySpark, Spark SQL, jobs, CI/CD).
• Garantir la sécurité et la conformité des données : chiffrement, data masking, RGPD.
• Optimiser les performances et les coûts des workloads (tuning Spark, autoscaling, sizing).
• Assurer l'exploitation en production : SLA/SLO, monitoring, runbooks, gestion des incidents et des changements.
• Être le référent technique auprès des data engineers, des équipes ops et sécurité et des métiers

Connaissances

Azure Data Lake

Databricks avancé

Architecture Data Lakehouse

Gouvernance données

RGPD sécurité

CI/CD DevOps

Power BI

Outils

Databricks

Unity Catalog

Power BI

Spark SQL

Azure Synapse

Description du poste

Le contexte

Nous recherchons un(e) Architecte Technique Senior pour piloter l'architecture de plusieurs use cases BigData en production. Ces use cases portent sur des flux d'ingestion et d'exposition de données dans un environnement Azure / Databricks exigeant.

Vos missions

• Concevoir et piloter l'architecture technique des use cases data (ingestion batch et temps réel, exposition BI)

• Co-administrer Unity Catalog et les workspaces Databricks en production (gouvernance, RBAC, lineage, audit)

• Concevoir des pipelines Databricks industrialisés (PySpark, Spark SQL, jobs, CI/CD)

• Garantir la sécurité et la conformité des données : chiffrement, data masking, RGPD

• Optimiser les performances et les coûts des workloads (tuning Spark, autoscaling, sizing)

• Assurer l'exploitation en production : SLA/SLO, monitoring, runbooks, gestion des incidents et des changements

• Être le référent technique auprès des data engineers, des équipes ops et sécurité et des métiers

Compétences clés

• Azure Data Lake / ADLS (architecture, sécurité, performance)

• Écosystème Azure Data en production : ADF, Synapse, Event Hub, Key Vault

• Databricks avancé : clusters, pools, jobs, permissions, Unity Catalog

• Lakehouse / Delta Lake : partitionnement, Z-order, modélisation de data marts

• Streaming : Event Hubs, Kafka, Structured Streaming

• Réseau et identité Azure : VNet, Private Endpoints, Azure AD, RBAC

• Alimentation BI (Power BI ou équivalent)

• DevOps : Git, branching, CI, releases et rollback