Data Engineer

Miba Group; Maharashtra; On-site; INR 1,200,000 - 2,000,000; Full time

Job summary

Miba Group in Maharashtra, Indien sucht einen erfahrenen Data Engineer, der Databricks, PySpark und SQL beherrscht und komplexe ETL-Pipelines in der Azure-Cloud implementiert.

Zu den Aufgaben gehören die Entwicklung von Data Lakes, Azure Data Factory, Synapse und Data Warehouse-Lösungen sowie enge Zusammenarbeit mit dem Team; gute Kommunikationsfähigkeiten auf Deutsch und Englisch werden erwartet.

Qualifications

• Bachelor's oder gleichwertiger Abschluss in CS/IT/EC.
• 3–4 Jahre Berufserfahrung im relevanten Data Engineering und Azure-Kenntnisse.
• Mindestens 3 Jahre Erfahrung mit Databricks, PySpark und SQL.
• Erfahrung mit SQL Stored Procedures, Views und Funktionen.
• Erfahrung mit Azure Data Lake, Synapse, Data Factory, SQL Data Warehouse, Blob.
• Gewandte Erstellung von Data Factory-Pipelines für ETL in der Cloud.
• Gute mündliche und schriftliche Kommunikationsfähigkeiten.

Skills

Databricks

PySpark

SQL

Azure Cloud

Data Warehousing

ETL Pipelines

Kommunikation

Education

Bachelor oder gleichwertiger Abschluss in CS/IT/EC

Tools

Azure Data Factory

Azure Synapse

Azure Data Lake

SQL Stored Procedures

Views & Functions

Power BI

Job description

Ihre Aufgaben

Must Have

• Bachelors or equivalent degree in Computer Science, IT, electronics and communications
• Minimum 3-4 years of professional experience in relevant Data Engineering field and knowledge of cloud platform i.e., Azure.
• Minimum 3 years of strong experience in Databricks, pyspark and SQL.
• Experience into SQL stored procedures, Views, functions, SAP ODATA etc.
• Experience with Azure Data Lake, Azure Synapse, Azure Data Factory, SQL Data Warehouse, Azure Blob, Azure Storage Explorer
• Proficient in creating Data Factory pipelines for on-cloud ETL processing; copy activity, custom Azure development etc.
• Good verbal and written communication skills.

Good To Have

• Good to have knowledge of BI related technologies i.e. PowerBI, SSRS.
• Knowledge of Machine Learning models in Databricks.
• Knowledge or experience in row level security, GIT, CI/CD.
• Experience with or knowledge of Agile Software Development methodologies.

Ihr Profil

Soft Skills

• Assuming personal responsibility & demonstrating reliability
• Own Initiatives and perseverance
• Ability to deal with conflicts & solve problems
• Negotiation skills
• Decision making
• Ability to Cooperate
• Excellent written and verbal communication skills