Senior Data Engineer (m/w/d)

Standort: Frankfurt am Main Kennziffer: vacancies-236-A F

Als mittelständisches Unternehmen und verlässlicher Partner der Industrie liefert Schmitt Engineering umfassende technische Expertise. Unsere Tätigkeiten erstrecken sich entlang der Prozesskette von der Planung und Projektierung über die Entwicklung und Konstruktion bis hin zur Fertigung, Montage und Inbetriebnahme.

Ist Technik auch Ihre Leidenschaft? Dann werden Sie Teil unseres Teams und entwickeln mit uns die Zukunft.

Ihre Aufgaben:

• Entwicklung, Betrieb und Optimierung von Datenprodukten und Batch-/Streaming-Pipelines in Microsoft Fabric Lakehouses (SQL, Spark/Scala, Delta Lake; Kafka/Event Hubs, ADLS/S3)
• End-to-End-Verantwortung für Datenprodukte: Ingestion, Transformation, Tests, Deployment, Scheduling, Monitoring und Workflow-Orchestrierung (Airflow)
• Identifikation und Umsetzung von Optimierungspotenzialen (Time-to-Market, Betriebskosten, Performance)
• Entwicklung von Data-Warehousing-Artefakten (MySQL) inkl. grundlegender Modellierung (z.B. Star Schema)
• Sicherstellung von Datenqualität, Anonymisierung und DSGVO-Konformität
• Bereitstellung analysierbarer Datasets für Power BI
• Mitarbeit im agilen DevOps-Team (Scrum/SAFe) inkl. Dokumentation sowie fachlicher Betrieb (Troubleshooting, CVEs, Nachprozessierung, Stakeholder-Kommunikation)

Ihr Profil:

• Abgeschlossenes Studium im Bereich Informatik, Wirtschaftsinformatik, Data Science oder eine vergleichbare Qualifikation mit starkem IT- und Datenbezug sowie einschlägige Berufserfahrung
• Erfahrung mit Microsoft Fabric/Azure, Power-BI-Datenbereitstellung sowie MySQL und DWH-Grundlagen
• Erfahrung im Anwendungsbetrieb, agilen SCRUM-Teams und mit GitLab CI/CD (Build, Test, Deploy, Reviews)
• Sehr gute SQL-Kenntnisse sowie Erfahrung mit Spark (Scala), Delta Lake, Kafka/Event Hubs und Airflow
• Know-how in Batch- und Streaming-Architekturen, Performance-Optimierung, Datenqualität und DSGVO
• Optional: AWS (S3, EMR, Lambda), Migrationen Richtung Fabric, IaC-Grundlagen
• Sehr gute Deutschkenntnisse (C1/C2) in Wort und Schrift

Note:
Please be aware that German is the working language in our project and good German language skills (level B2+) are a prerequisite for the position.

Wir bieten Ihnen folgende Benefits:

• Über 30 Jahre Know-how und abwechslungsreiche Projekte
• Namhafte Kunden in Hochtechnologiebranchen
• Unbefristeter Arbeitsvertrag
• Attraktive, übertarifliche Vergütungsstruktur
• 30 Tage Urlaub
• Flexible Arbeitszeitmodelle und Homeoffice
• Mitarbeiterevents
• Gesundheitsleistungen
• Mitarbeiter werben Mitarbeiter