Auf einen Blick
- Aufgaben: Teste innovative AI-Anwendungen und entwickle automatisierte Testframeworks.
- Unternehmen: Führendes Unternehmen im Bereich KI mit einem dynamischen, remote Team.
- Vorteile: Flexibles Arbeiten, wettbewerbsfähiges Gehalt und Möglichkeiten zur beruflichen Weiterentwicklung.
- Weitere Informationen: Vollständig remote mit flexiblen Arbeitszeiten und großartigen Karrierechancen.
- Warum dieser Job: Gestalte die Zukunft der KI und arbeite an spannenden Projekten mit modernster Technologie.
- Qualifikationen: Mindestens 5 Jahre Erfahrung in QA, davon 1 Jahr in AI-Testing.
Das prognostizierte Gehalt liegt zwischen 60000 - 80000 € pro Jahr.
Wir suchen einen erfahrenen Senior AI QA Engineer mit umfangreicher Erfahrung in manuellen und automatisierten Tests sowie umfassender Erfahrung im Testen von KI-basierten Anwendungen. Der ideale Kandidat wird eine Vielzahl von Anwendungen testen, einschließlich Projekte, die KI-Agenten und Integrationen mit APIs und Datenbanken umfassen. Sie werden dazu beitragen, dass unsere Lösungen zuverlässig und genau sind und die Geschäftsanforderungen erfüllen, während Sie auch zur Entwicklung unserer Automatisierungsfähigkeiten beitragen.
Dies ist eine vollständig remote Position mit der Anforderung, von 13:00 bis 21:00 Uhr polnischer Zeit zu arbeiten, aufgrund des Standorts des Kunden-Teams.
Verantwortlichkeiten
- Forschung und Weiterentwicklung von Automatisierungsrahmenwerken im Einklang mit Gen AI-Tools und Best Practices.
- Entwurf und Automatisierung der Bewertung von Gen AI-Funktionen — Grundierung, Antwortgenauigkeit, Determinismus/Wiederholbarkeit, Präzision, Rückruf und Kriterienrückruf.
- Erstellung automatisierter LLM-Testumgebungen, die die Bewertung über menschliche Eingriffe hinaus skalieren.
- Auswahl und Anwendung von Gen AI-Bewertungsrahmenwerken zur Messung der Antwortqualität und Pipeline-Effizienz.
- Durchführung manueller Tests nach Bedarf zur Validierung neuer Funktionen, Integrationen und Benutzerstories.
- Erstellung und Pflege von Testfällen aus Anforderungen und Benutzerstories.
- Testen von Anwendungen, die KI-Agenten, APIs, Datenbanken und andere Integrationen umfassen können.
- Zusammenarbeit mit Produkt-, Ingenieur- und Betriebsteams, um Anforderungen und Bereitstellungsumgebungen zu verstehen.
- Verfolgung und Berichterstattung von Testergebnissen, Defekten und Qualitätsmetriken.
- Unterstützung bei der Fehlersuche bei Produktionsproblemen und Eskalation von Risiken nach Bedarf.
- Leitung und Unterstützung von Teammitgliedern, einschließlich Onshore- und Offshore-Beratern.
Qualifikationen
- Über 5 Jahre Erfahrung in der Software-QA, davon mindestens 1 Jahr mit Fokus auf das Testen von KI-Agenten, agentischen Lösungen oder LLM-basierten Systemen.
- Praktische Erfahrung mit manuellen und automatisierten Tests von KI-Agenten, einschließlich Prompt-/Anweisungstests und Bewertung agentischer Workflows.
- Starke Programmierkenntnisse in Python-Testautomatisierung — pytest oder gleichwertig, Skripting und Integration von AI/ML-Bibliotheken.
- Expertise in KI-Agenten-Rahmenwerken, Prompt-Engineering und Bewertungsmetriken für LLM-basierte Systeme.
- Nachgewiesene Erfahrung im Testen und Bewerten von Gen AI / LLM-Anwendungen — Grundierung, Antwortgenauigkeit und Halluzination/Determinismus-Prüfungen.
- Angewandtes Wissen über Gen AI / LLM-Bewertungsrahmenwerke und Metriken — Präzision, Rückruf, Kriterienrückruf und Effizienz.
- Vertrautheit mit Issue- und Testmanagement-Tools wie Jira, QMetry und TestRail.
- Erfahrung mit Versionskontrollsystemen und der Integration von Tests in CI/CD-Pipelines.
- Flexibilität, KI-gestützte Tools für QA wie GitHub Copilot und LLM-basierte Testgenerierung zu verwenden.
- Verständnis von Cloud-Umgebungen, insbesondere AWS.
- Exzellente Kommunikations-, Kollaborations- und Führungsfähigkeiten.
Nice to Have
- Erfahrung mit agentischen KI-Plattformen wie LangChain, OpenAI Function Calling oder ähnlichem.
- Erfahrung mit KI-Sicherheit, Bias und Zuverlässigkeitstests.
- Erfahrung mit der Generierung von Testdaten für AI/ML-Systeme.
Senior AI QA Engineer (Automation & Manual, AI-based Applications Testing) Arbeitgeber: EPAM Systems
Als Arbeitgeber bieten wir Ihnen die Möglichkeit, in einem dynamischen und innovativen Umfeld zu arbeiten, das sich auf die Entwicklung von KI-basierten Anwendungen konzentriert. Unsere Unternehmenskultur fördert Zusammenarbeit und kontinuierliches Lernen, während wir Ihnen flexible Arbeitszeiten und die Freiheit des Remote-Arbeitens bieten. Darüber hinaus unterstützen wir Ihre berufliche Weiterentwicklung durch Schulungen und den Austausch mit Experten in der Branche, was diese Position besonders attraktiv macht.
StudySmarter Expertenrat🤫
Wir sind der Meinung, dass Sie so Senior AI QA Engineer (Automation & Manual, AI-based Applications Testing) erhalten könnten
✨Das richtige Netzwerk nutzen
In der Automatisierungstechnik lohnt es sich, Teil von Fachgruppen oder Online-Communities zu sein, wie z.B. LinkedIn-Gruppen oder speziellen Foren. Diese Plattformen sind nicht nur gut für den Austausch mit Kollegen, sondern auch für den direkten Kontakt mit Unternehmen, die Stellen ausschreiben.
✨Messebesuche planen
Auf Messen und Branchenveranstaltungen wie der SPS IPC Drives oder der Hannover Messe gibt es oft die Möglichkeit, direkt vor Ort mit Unternehmen zu sprechen. Nutzt die Chance, um euch über EPAM Systems und deren offene Stellen zu informieren und vielleicht sogar einen ersten Eindruck zu hinterlassen.
✨Praktische Erfahrungen sammeln
Falls ihr noch nicht so viel Erfahrung habt, schaut nach Möglichkeiten für Workshops oder Projekten in der Automatisierungstechnik, die euch praktische Kenntnisse vermitteln. Das zeigt nicht nur eure Initiative, sondern verschafft euch auch einen Pluspunkt im Bewerbungsprozess.
✨Bewirb dich direkt über unsere Seite
Wenn ihr euch für eine Stelle bei EPAM Systems interessiert, bewerbt euch direkt über unsere Website. So landet eure Bewerbung direkt im Fokus und ihr zeigt, dass ihr wirklich hinter der Stelle steht. Zudem könnt ihr in der Übersicht der Ausschreibungen oft mehr über das Team und die Unternehmenskultur erfahren.
Wir glauben, dass du diese Fähigkeiten brauchst, um Senior AI QA Engineer (Automation & Manual, AI-based Applications Testing) mit Bravour zu bestehen
Einige Tipps für deine Bewerbung 🫡
Bring deine technischen Fähigkeiten zur Geltung:In der Automatisierungstechnik sind spezifische technische Fähigkeiten gefragt. Hebe deine Kenntnisse in Bereichen wie SPS-Programmierung, Roboter- oder Prozessautomatisierung klar in deinem Lebenslauf hervor. Vielleicht hast du sogar Zertifikate oder Schulungen, die deine Kenntnisse belegen – zeig das!
Präzise CV-Gestaltung:Achte bei deinem Lebenslauf darauf, dass du klar und präzise die Projekte auflistest, an denen du gearbeitet hast. Konzentriere dich auf messbare Ergebnisse und technische Herausforderungen, die du gemeistert hast. Das wird deine Eignung für die Stelle bei EPAM Systems unterstreichen.
Motivation und Teamarbeit betonen:Im Anschreiben solltest du nicht nur deine technischen Fähigkeiten beeindruckend darstellen, sondern auch deine Motivation für die Automatisierungstechnik betonen. Berichte, wie wichtig dir Teamarbeit und innovative Lösungen sind – das passt gut zur Vollzeitstelle bei EPAM Systems!
Verlinke relevante Projekte oder Portfolios:Falls du an spannenden Projekten gearbeitet hast, die irgendetwas mit Automatisierungstechnik zu tun haben, verlinke diese in deiner Bewerbung! Ein Portfolio oder Links zu veröffentlichten Arbeiten können dir helfen, dich von anderen Bewerbungen abzuheben.
Wie man sich auf ein Vorstellungsgespräch bei EPAM Systems vorbereitet
✨Verstehe die Werkzeuge der Automatisierungstechnik
Mach dich mit den gängigen Tools der Branche vertraut, wie PLC-Programmierung und SCADA-Systemen. Vielleicht wirst du im Gespräch sogar auf eine technische Herausforderung stoßen, also sei bereit, konkrete Beispiele aus deiner bisherigen Erfahrung zu nennen, in denen du diese Tools angewendet hast.
✨Bereite dich auf technische Fragen vor
Erwarte technische Fragen, die sich auf Automatisierungssysteme und deren Integration beziehen könnten. Das bedeutet, dass wir uns ein paar Systemdesign-Fragen ansehen und darüber nachdenken sollten, wie wir Probleme mit bestehenden Automatisierungssystemen lösen würden. Das zeigt nicht nur dein Wissen, sondern auch deine Problemlösungsfähigkeiten.
✨Zeige deine Projekte und Erfolge
Hast du bereits an Projekten in der Automatisierungstechnik gearbeitet? Bringe ein Portfolio mit, das deine besten Arbeiten zeigt. Das kann alles umfassen - von Prozessoptimierungen bis zu erfolgreich implementierten Lösungen. Du willst der Jury zeigen, was du drauf hast und wie du Ergebnisse lieferst!
✨Motivation und langfristige Perspektive
Da es sich um eine Vollzeitstelle handelt, sollten wir uns auch Gedanken darüber machen, warum du langfristig in diesem Bereich arbeiten möchtest. Sei bereit, deine Motivation zu erklären, wie du in der Automatisierungstechnik wachsen möchtest und wie du zum Erfolg von EPAM Systems beitragen kannst. Das zeigt, dass du wirklich an einer Karriere in diesem Bereich interessiert bist!
