Databricks Platform Expert

Michelin; Pune District; On-site; INR 167,400 - 279,000; Full time

Job summary

Un'azienda multinazionale cerca un Databricks Platform Expert per gestire e ottimizzare gli spazi di lavoro e i cluster di Databricks. I candidati devono avere 4-6 anni di esperienza in amministrazione di Databricks e competenze in Apache Spark. Il ruolo comporta la gestione di pipeline e l'ottimizzazione dei costi, oltre alla collaborazione con team di ingegneria dei dati e sicurezza. Offriamo l'opportunità di lavorare in un ambiente innovativo e stimolante.

Qualifications

• 4-6 anni di esperienza come amministratore di Databricks o ingegnere di dati.
• Esperienza pratica con Databricks Jobs e configurazione del cluster.
• Conoscenza approfondita di Delta Lake e architettura lakehouse.

Responsibilities

• Gestire e configurare gli spazi di lavoro Databricks.
• Ottimizzare le politiche di cluster e strategie di autoscaling.
• Scrivere codice Spark efficiente per le trasformazioni dei dati.

Skills

Apache Spark

Databricks administration

Data governance

Git

CI/CD

Job description

Databricks Platform Expert page is loaded## Databricks Platform Expertlocations: Puneposted on: Offerta pubblicata 11 giorni fatime left to apply: Data fine: 1 marzo 2026 (6 giorni rimanenti per candidarsi)job requisition id: R-2025044388Databricks Platform Expert- - - - - - - - - - - -**Key Responsibilities****Databricks Platform Expert*** Manage, configure, and administer Databricks workspaces, Clusters, SQL Warehouses, Serverless, jobs, and workspace objects.* Implement and manage Unity Catalog, including catalogs, schemas, tables, access controls, and data lineage.* Optimize cluster policies, auto-scaling strategies, and cost management for Serverless and Classic compute.* Serve as the SME for Databricks infrastructure, governance, and security best practices.* Monitor workspace performance, cluster stability, logs, job reliability, and platform health.* Implement CI/CD pipelines for notebooks, jobs, and Delta Live Tables using Git integration.* Support user provisioning, access controls (ACLs), secrets management, and workspace SSO.* Write efficient Spark (PySpark / SQL / Scala) code for ETL, data transformations, and pipeline optimizations.* Assist data engineering teams with Spark job debugging, performance tuning, and code reviews.* Build and maintain production-grade pipelines leveraging Delta Lake, Databricks Jobs, and DLT.* Implement and manage RBAC, SCIM provisioning, AIM, service principals, and cluster access controls.* Ensure compliance with enterprise data governance, audit, and logging requirements.* Manage secrets Key Vault and enforce secure credential handling.* Support audit reports, compliance reviews, and workspace security configuration.* Monitor job failures, cluster lifecycle performance, and system events using Databricks logs and cloud-native monitoring tools (Azure Monitor).* Create automated alerts and observability dashboards for platform usage, cost, and performance.* Troubleshoot Databricks runtime issues, library conflicts, and Spark execution failures.* Collaborate with cloud and network teams on VNet, peering, and private-link connectivity issues.* Develop cost governance policies for cluster sizes, job policies, and SQL Warehouse tiers.* Identify opportunities to reduce cost via autoscaling, spot instances (classic clusters), and job consolidation.**Required Qualifications*** 4–6 years of experience working with Databricks as an administrator or data engineer.* Strong expertise in Apache Spark programming (PySpark preferred; SQL or Scala is a plus).* Hands-on experience with Databricks Jobs, cluster configuration, SQL Warehouses, and Unity Catalog.* Deep understanding of Delta Lake, ACID transactions, and lakehouse architecture.* Experience with Git, CI/CD, and DevOps concepts for data engineering workflows.* Knowledge of cloud platforms ( Azure).* Familiarity with IAM, networking basics, monitoring tools, and security patternsAvanzare insieme, un impegno reciproco e responsabile: entrare a far parte di Michelin significa svilupparsi in una multinazionale in cui il rispetto, il dialogo, la passione e la fiducia sono elementi fondamentali nella relazione con il personale. Se deciderai di intraprendere il tuo percorso di carriera con noi, avrai la possibilità di crescere e di contribuire allo sviluppo del Gruppo Michelin. Con più di 114000 dipendenti nel mondo, di 170 diverse nazionalità, la diversità dei nostri talenti è fondamentale per la creatività e l'innovazione della nostra azienda. Responsabilità, autonomia e spirito di squadra sono al servizio di ogni nostro cliente. Ecco perchè insieme innoviamo e rendiamo possibile il progresso della mobilità sostenibile nel mondo, in tutte le sue forme, con passione, entusiasmo ed orgoglio. Unisciti a Michelin e contribuisci a sviluppare il modo migliore di avanzare.