AI Test Engineer (F/M/*)

Aus Europa, für Europa - Wir bauen die führende Business-KI. Wir sind Aachens größtes und Kölns am stärksten wachsendes KI-Startup. KMUs profitieren davon, wenn internes Wissen sofort nutzbar wird und intelligente Agenten darauf reagieren können. Wir glauben an eine Zukunft, in der Business-KI, einschließlich Agenten innerhalb von amber und anderen Plattformen, auf einer gemeinsamen Kontextschicht arbeitet, sodass Teams schneller arbeiten, Übergaben nahtlos erfolgen und das Know-how im Unternehmen bleibt.

Aufgaben

• Du entwickelst, planst und optimierst Teststrategien für unsere KI-Anwendungen und sorgst dafür, dass Qualität von Anfang an mitgedacht wird.
• Du führst manuelle und automatisierte Tests für AI-Features, APIs und Workflows durch und baust diese kontinuierlich aus.
• Du validierst Antworten, Prompts, Modellverhalten und Agentenlogiken hinsichtlich Qualität, Konsistenz und Robustheit und stellst sicher, dass unsere KI zuverlässig performt.
• Du identifizierst, dokumentierst und verfolgst Fehler, Edge Cases und Qualitätsrisiken damit nichts durch die Maschen fällt.
• Du erstellst Testfälle, Testdaten und Evaluationskriterien für unterschiedliche Anwendungsszenarien und schaffst damit die Grundlage für belastbare Qualitätsaussagen.
• Du arbeitest eng mit Produktmanagement, Engineering und unseren Data/AI-Teams zusammen, um die Qualitätssicherung entlang des gesamten Entwicklungsprozesses sicherzustellen.
• Du unterstützt aktiv beim Aufbau unserer QA-Prozesse, treibst Testautomatisierung voran und etablierst zuverlässige Release-Checks.
• Du analysierst das Systemverhalten hinsichtlich Performance, Zuverlässigkeit und Nutzerqualität und leitest daraus konkrete Verbesserungen für unsere Plattform ab.

Qualifikationen

• Du hast ein abgeschlossenes Studium in Informatik, Wirtschaftsinformatik, Mathematik oder einem vergleichbaren Bereich.
• Du bringst Erfahrung im Software Testing / QA mit und hast bereits Webanwendungen, APIs oder datengetriebene Systeme getestet.
• Du interessierst dich für KI-Systeme, LLMs, Prompting oder AI-Workflows. Idealerweise hast du hier bereits erste praktische Erfahrung gesammelt.
• Du beherrschst gängige Testmethoden sicher, vom Testfall-Design bis zur systematischen Fehleranalyse.
• Du hast idealerweise Erfahrung mit Testautomatisierung und kennst dich mit gängigen Tools aus dem QA-Umfeld aus.
• Du verfügst über ein solides technisches Verständnis für Schnittstellen, Datenflüsse und systematische Ursachenanalyse.
• Du arbeitest strukturiert, präzise sowie analytisch und verlierst auch bei komplexen Sachverhalten nicht den Überblick.
• Du kommunizierst klar und überzeugend auf Deutsch und Englisch und hast einen hohen Anspruch an die Qualität deiner Arbeit.

Benefits

• Team Offsites - Da du in einem internationalen Team arbeiten wirst, treffen wir uns zweimal im Jahr alle zusammen irgendwo in Europa.
• Du hast die Wahl: Entweder ein bezuschusstes Deutschlandticket oder eine Urban Sports Club Mitgliedschaft gehen auf uns.
• Wir leben ein hybrides Arbeitsmodell: Wir sind der Meinung, dass es wichtig ist regelmäßig in Person zusammenzuarbeiten. Darum treffen wir uns 3 mal wöchentlich an einem unserer Standorte.
• Damit Du vor Ort auch gut versorgt bist, gibt es bei uns jeden Arbeitstag vor Ort digitale, steuerfreie Essensgutscheine direkt aufs Handy.
• Attraktive Vergütung. Zusätzlich belohnen wir herausragende Mitarbeitende mit Unternehmensanteilen und lassen Sie so direkt am Unternehmenserfolg teilhaben.
• Starte in einem Unternehmen, das Dich wachsen lässt – egal, ob Du deine Skills in Deinem Bereich ausbauen oder andere Fähigkeiten erlernen möchtest.
• Wir fördern Deine persönliche Entwicklung durch Weiterbildung und Raum für Eigenverantwortung.
• Ein Team von motivierten Leuten, die Bock haben, KI-Lösungen auch für mittelständische Unternehmen zugänglich zu machen.
• Arbeite mit den neusten Technologien & Tools 🔨.

Klingt spannend? Dann hilf uns jetzt und schick uns einfach kurz deinen CV. Wir freuen uns auf dich!

Bitte beachte: Für diese Position berücksichtigen wir ausschließlich Bewerber:innen mit Wohnsitz in Deutschland.

Let's go big together 🚀