Data Engineer – Schwerpunkt Programmierung & Datenpipelines
Data Engineer – Schwerpunkt Programmierung & Datenpipelines
Data Engineer – Schwerpunkt Programmierung & Datenpipelines
Data Engineer – Schwerpunkt Programmierung & Datenpipelines
Jobriver HR Service
Internet, IT
Köln
- Art der Beschäftigung: Vollzeit
- 59.500 € – 81.000 € (von XING geschätzt)
- Vor Ort
- Zu den Ersten gehören
Data Engineer – Schwerpunkt Programmierung & Datenpipelines
Über diesen Job
Data Engineer – Schwerpunkt Programmierung & Datenpipelines
Beschreibung
Das Unternehmen sucht einen engagierten Data Engineer mit einem klaren Schwerpunkt auf Programmierung und Datenverarbeitung. In dieser Rolle sind Sie dafür verantwortlich, Daten effizient zum Fließen zu bringen und leistungsstarke Datenpipelines zu entwickeln. Sie arbeiten in einem dynamischen Consulting-Umfeld und entwickeln maßgeschneiderte Datenlösungen für verschiedene Kunden. Zu Ihren Aufgaben gehört die Entwicklung skalierbarer ETL/ELT-Datenpipelines für Batch- und Streaming-Verarbeitung, wobei Sie Technologien wie Spark, PySpark, Python und SQL einsetzen. Sie implementieren Datenmodelle nach den Prinzipien von Kimball, Data Vault oder Lakehouse und transformieren sowie normalisieren Daten aus unterschiedlichen Quellsystemen. Zudem orchestrieren Sie Datenpipelines mit Tools wie Airflow und arbeiten mit Plattformen wie Databricks oder Snowflake. Ihre Rolle umfasst auch die Unterstützung von Datenanalyse- und Machine-Learning-Pipelines, wobei Sie durch Testing, Dokumentation und CI/CD für die Qualität der Lösungen sorgen. Das Arbeitsumfeld ist kreativ und dynamisch, und Sie haben die Möglichkeit, aktiv zur Weiterentwicklung des Data-Bereichs beizutragen.
Anforderungen
Der ideale Kandidat bringt mehrjährige Berufserfahrung in den Bereichen Datenverarbeitung und Programmierung mit. Sie verfügen über sehr gute SQL-Kenntnisse sowie fundierte Kenntnisse in Spark und PySpark. Ein sicherer Umgang mit Python ist ebenso erforderlich wie Erfahrung mit dbt und Orchestrierungstools wie Airflow. Kenntnisse in der Datenmodellierung, insbesondere in dimensionaler Modellierung, Data Vault sowie Normalisierung und Denormalisierung, sind von Vorteil. Sie denken analytisch und sind in der Lage, komplexe Datenprobleme effizient zu lösen. Selbstorganisiertes Arbeiten und die Fähigkeit, den Überblick in mehreren Kundenprojekten zu behalten, sind essenziell. Zudem sollten Sie Freude an Consulting und wechselnden Projekten haben. Offene und konstruktive Kommunikation sowie die Fähigkeit, Feedback zu schätzen, runden Ihr Profil ab.