Data Engineer - Streaming & Vehicle Data (m/w/d) (Ostfildern, BW, DE, 73760)
Data Engineer - Streaming & Vehicle Data (m/w/d) (Ostfildern, BW, DE, 73760)
Data Engineer - Streaming & Vehicle Data (m/w/d) (Ostfildern, BW, DE, 73760)
Data Engineer - Streaming & Vehicle Data (m/w/d) (Ostfildern, BW, DE, 73760)
Deutsche Automobil Treuhand GmbH - Fachkräfte und Berufseinsteiger
Automobile und Zweiräder
Ostfildern
- Art der Beschäftigung: Vollzeit
- 58.000 € – 73.500 € (von XING geschätzt)
- Vor Ort
- Zu den Ersten gehören
Data Engineer - Streaming & Vehicle Data (m/w/d) (Ostfildern, BW, DE, 73760)
Über diesen Job
Wie Sie uns weiterbringen
- Sie unterstützen bei der Weiterentwicklung von Telematik-Aufbereitungsprozessen via Spark Structured Streaming.
- Die technische Anbindung von Object Stores an die Streaming-Plattform zur Anreicherung und Aggregation der Telematikdaten wird von Ihnen sichergestellt und kontinuierlich optimiert.
- Dabei veredeln Sie Rohdaten über mehrere Qualitätsstufen hinweg (Bronze, Silver, Gold) und überführen komplexe Strukturen in flache Formate, um eine präzise und effiziente Datenanalyse zu ermöglichen.
- Darüber hinaus begleiten Sie uns bei technologischen Weiterentwicklung und bringen die Offenheit mit, sich gegebenenfalls zukünftig mit den Komponenten der Gesamtarchitektur wie Cloud Streaming Architecture, AWS IoT Core, MQTT, Datalakes und Databricks zu befassen.
Was wir an Ihnen schätzen
- Ihr Studium der Informatik, Wirtschaftsinformatik oder einer vergleichbaren Ausbildung bildet die fachliche Basis.
- Sie verfügen über fundierte Kenntnisse in der Datenverarbeitung mit Data Plattformen wie Databricks sowie praktische Erfahrung im Umgang mit Apache Spark und Streaming-Konzepten.
- In der täglichen Arbeit setzen Sie Python (PySpark) und SQL routiniert ein, um effiziente Datenpipelines zu gestalten und Transformationen umzusetzen.
- Sie bringen Erfahrung mit cloud-nativen Architekturen mit, beispielsweise im Microsoft Azure Umfeld und im Handling von Blob Storage Lösungen.
- Sie sind bereit, Ihr Wissen bei Bedarf perspektivisch auf neue Bereiche wie Cloud Streaming Architecture im AWS IoT Umfeld zu erweitern.
- Es bereitet Ihnen Freude, komplexe Datenströme in strukturierte Bahnen zu lenken und sich gemeinsam mit uns technologisch weiterzuentwickeln.
- Sicheres Auftreten im Team und Kommunikationsstärke – in gutem Deutsch oder Englisch – runden Ihr Profil ab.
Starten Sie mit uns durch, wir freuen uns auf Sie!
Erste Fragen beantwortet Ihnen gerne Frau Katharina Müller (katharina.mueller@dat.de).
Bitte bewerben Sie sich direkt über das Onlineformular.
Schwerbehinderte werden bei der Besetzung der Stelle gemäß SGB IX besonders berücksichtigt.
