Interim Senior Data Engineer MS Fabric (gn)
Interim Senior Data Engineer MS Fabric (gn)
Interim Senior Data Engineer MS Fabric (gn)
Interim Senior Data Engineer MS Fabric (gn)
Michael Page
Telekommunikation
München
- Verifizierte Job-Anzeige
- Art der Anstellung: Selbstständig
- Remote
Interim Senior Data Engineer MS Fabric (gn)
Über diesen Job
Intro
zeitnaher StartHerausforderung
Firmenprofil
Start: ab 01.09
Projektdauer: bis Ende des Jahres
Auslastung: Vollzeit (4 Tage pro Woche)
Arbeitsort: Vollständig remote
Projektsprache: Deutsch und Englisch
Aufgabengebiet
Projektkontext: Nach der erfolgreichen Migration in die Azure Cloud wird eine neue Plattform auf Basis von Microsoft Fabric aufgebaut. Der Fokus liegt auf dem Design und der Implementierung dieser Plattform sowie der Integration und Optimierung von Data Pipelines und Data Flows.
Anforderungsprofil
Aufgaben:
Design und Aufbau einer neuen Plattform in Microsoft Fabric.
Integration neuer Technologien wie MS Fabric und Python-Notebook-Umgebungen
Bearbeitung und Verarbeitung von Deltalake-Dateiformaten (bevorzugt) oder Parquet-Basis
Implementierung von Datenflüssen unter Berücksichtigung verschiedener Kanäle.
Mirroring von Data Pipelines und Data Flows.
Beratung zu Entscheidungskriterien wie z.B. der Wahl zwischen Python und Mirroring sowie Unterstützung bei der Architekturplanung.
Herausfordernde Analyse und Optimierung der Softwarearchitektur der Plattform.
Vergütungspaket
Anforderungen: Must-haves:
Fundierte Erfahrung mit Microsoft Fabric
Kenntnisse in Python und PySpark
Erfahrung mit Lakehouse und Warehouse-Architekturen
Vertrautheit mit OneLake von Vorteil
Expertise in Delta-Verarbeitung.
Praxis in der Arbeit mit Python Notebooks und C#
Erfahrung mit Cloud-Infrastrukturen (Azure)