Softwaretester für KI-basierte Systeme (m/w/d)
(Fokus: Testen von KI-Systemen, z. B. LLMs, ML-Modelle, Agentensysteme)
Wir bieten DirDu suchst neue Herausforderungen und eine langfristige Zusammenarbeit?
Du möchtest Dich fachlich und individuell weiterentwickeln und Deine Tatkraft in ein gutes Team einbringen?
Wenn ja, dann bist Du bei uns richtig!
Die AVABIS GmbH ist ein mittelständisches Beratungsunternehmen. Unsere Schwerpunkte liegen in den Bereichen Softwareentwicklung und Softwaretesten. Wir sind vor allem für Marktführer in den Branchen Automotive, E-Commerce, Gesundheit, Telekommunikation und Transport & Logistik tätig. Mit dem Hauptsitz in Dortmund, unserer Geschäftsstelle in Berlin und unseren bundesweiten Projektstandorten sind wir immer in Deiner Nähe.
Wir bieten Dir
Ein interessantes Arbeitsumfeld mit einer modernen Unternehmenskultur und mit sehr flachen Hierarchien.
Sowie
- Zuverlässigkeit und Loyalität mit gegenseitigem Vertrauen
- Ein Überstundenkonto und einen 1:1 Freizeitausgleich
- Flexible Heimarbeit (je nach Rolle und Projekt)
- Sehr gute Weiterbildungsmaßnahmen
- Eine betriebliche Altersvorsorge
- Private Bahncard-Nutzung, Firmenwagen oder -fahrrad (je nach Tätigkeit)
- Regelmäßige Gruppen – und Firmenevents
- Und nicht zuletzt: Gutes Geld für gute Arbeit
Bei der AVABIS erwartet Dich zudem der Zugang zu einem spannenden Wachstumsmarkt.
Deine Aufgaben
Als Softwaretester (m/w/d) mit Schwerpunkt auf dem Testen von KI-basierten Systemen übernimmst Du herausfordernde Aufgaben wie:
- Qualitätssicherung für generative KI-Systeme – von Agentenarchitekturen bis zu LLM-basierten Workflows
- Entwicklung von Teststrategien für nicht-deterministische Systeme – Bias, Halluzinationen, Robustheit, Erklärbarkeit
- Durchführung von Adversarial Testing – Jailbreaking, Prompt Injection, Sicherheits- und Datenschutztests
- Automatisierung von KI-gestützten Tests mit modernen Tools für Modellüberwachung, Regressionstests und Drift-Erkennung
- Zusammenarbeit mit Data Scientists, Entwicklern und Produktteams, um Testbarkeit von KI-Systemen sicherzustellen
- Evaluierung neuer KI-Testing-Tools und Best Practices -Deine Expertise prägt den Testprozess
Dein Profil
Persönlichkeit & Mindset
- Sie haben eine abgeschlossene Ausbildung als Fachinformatiker in der Anwendungsentwicklung, ein abgeschlossenes Studium der Informatik, Wirtschaftsinformatik oder einem vergleichbaren Studiengang oder sind Quereinsteiger mit Interesse am Softwaretesten.
- Wichtiger als die formale Ausbildung sind uns eine Begeisterung für das Thema Software Engineering.
Und last but not least
- Innovationsgeist – Du hast Spaß daran, neue Testmethoden für KI zu entwickeln
- Analytische Schärfe – Du erkennst Muster, Schwächen und neue Risikoszenarien in KI-Modellen
- Neugier & Lernbereitschaft – KI-Testing entwickelt sich schnell, Du bleibst up to date
Methodische Skills
- Exploratives & heuristisches Testen – klassische Testkonzepte reichen nicht, Du denkst weiter
- KI-Sicherheitsanalyse – Du kennst gängige Angriffsmuster auf LLMs und entwickelst Abwehrtests
- Erfahrung mit KI-Metriken – Du kannst KI-Leistung bewerten: Fairness, Erklärbarkeit, Robustheit
Technisches Know-how & Tools
- Praxis mit Testautomatisierung & CI/CD für KI-Modelle
- Erfahrung mit Frameworks für LLM-Testing (z. B. DeepChecks, AI Fairness 360, LangTest)
- Optional: Kenntnisse in MLOps & Modell-Monitoring (z. B. Weights & Biases, MLflow)
Sehr gute Deutsch- und Englischkenntnisse
Deine Perspektiven
Bei uns erwarten Dich interessante und anspruchsvolle Projekte.
Deine Perspektiven bei uns liegen vor allem in Deiner fachlichen Entwicklung. Schritt für Schritt erreichst Du mit uns neue Stufen der Kompetenz, sei es durch eine passende Zertifizierung, hochwertige Online-Kurse, Literatur oder andere individuelle Methoden.
Indem wir die individuellen Stärken jedes Einzelnen bestmöglich berücksichtigen und durch gezielte Entwicklung fördern, kann jeder seine eigenen Potenziale freisetzen. Zum Know-how-Transfer steht Dir auch unser virtueller AVABIS-Campus zur Verfügung.
Klingt das interessant für Dich? Dann freuen wir uns auf Deine Bewerbung!
bewerbung@avabis.de
Ihre Ansprechpartner aus dem Personalmanagement helfen Ihnen gerne weiter.