AI Software Development Engineer in Test (AI-SDET)

Wir suchen derzeit einen AI Software Development Engineer in Test (AI-SDET) in Indien. Diese Rolle befindet sich an der Schnittstelle zwischen Software-Qualitätsengineering und modernen KI-Systemen und konzentriert sich darauf, wie sich das Testen in einer KI-nativen Welt entwickelt. Sie werden helfen, die QA-Praktiken neu zu definieren, indem Sie KI-gestützte Validierungsframeworks, Automatisierungsstrategien und intelligente Testwerkzeuge in den Engineering-Teams einführen. Die Position umfasst tiefgehende Arbeiten zur Bewertung von LLMs, RAG-Systemen und autonomen Agenten-Workflows, um die Zuverlässigkeit, Sicherheit und Leistung von KI-Anwendungen der nächsten Generation sicherzustellen. Sie werden sowohl als praktischer Ingenieur als auch als Veränderungsagent agieren, um QA-Teams zu befähigen, fortschrittliche KI-Testmethoden zu übernehmen. Die Umgebung ist hochinnovativ, schnelllebig und auf kontinuierliches Experimentieren und Verbesserung ausgerichtet. Dies ist eine einzigartige Gelegenheit, die Art und Weise zu gestalten, wie Qualitätsengineering in KI-gesteuerten Software-Ökosystemen durchgeführt wird.

Verantwortlichkeiten:

• Förderung der Einführung von KI-gestützten Testwerkzeugen und modernen QA-Praktiken in den Engineering-Teams, als Veränderungsagent für die Qualitätsumwandlung.
• Entwurf und Implementierung von Bewertungsframeworks für LLMs, einschließlich Halluzinationsdetektion, Bias-Bewertung, Verankerung, Sicherheitsvalidierung und Regressionstests.
• Aufbau automatisierter Pipelines zur Validierung von KI-Ausgaben unter Verwendung von semantischem Scoring, Einbettungen, strukturierten Assertions und Benchmark-Datensätzen.
• Testen und Validieren von RAG-Systemen, einschließlich Chunking-Strategien, Abrufgenauigkeit, Einbettungsqualität und Leistung von Vektordatenbanken.
• Entwicklung und Wartung skalierbarer Automatisierungsframeworks für UI, API, Microservices und ereignisgesteuerte Systeme mit Python und modernen Testwerkzeugen.
• Integration automatisierter Tests und Qualitätskontrollen in CI/CD-Pipelines in cloud-nativen Umgebungen und verteilten Architekturen.
• Validierung von KI-Agenten-Workflows, einschließlich Werkzeugnutzung, Orchestrierung, Gedächtnis und Multi-Agenten-Systemen über führende KI-Frameworks.
• Beitrag zur Beobachtbarkeit, Überwachung und Zuverlässigkeitsverbesserungen für KI-Systeme, die in großem Maßstab bereitgestellt werden.
• Zusammenarbeit mit Engineering- und Produktteams, um KI-Qualitätsstandards in den SDLC einzubetten und die allgemeine Softwarezuverlässigkeit zu verbessern.

Anforderungen:

• 4–10+ Jahre Erfahrung in der Softwareentwicklung oder QA, einschließlich 2–4+ Jahre mit Fokus auf KI/ML, LLMs oder KI-basierten Systemen.
• Starke Programmierkenntnisse in Python mit praktischer Erfahrung in Testautomatisierung und Softwareentwicklung.
• Tiefes Verständnis der QA-Prinzipien, Software-Testmethoden und Praktiken des Qualitätsengineerings.
• Praktische Erfahrung mit LLM-Tests, Prompt-Engineering, RAG-Systemen und KI-Bewertungsframeworks.
• Erfahrung mit APIs, Microservices und UI-Automatisierungsframeworks wie Playwright, Selenium oder Robot Framework.
• Vertrautheit mit CI/CD-Pipelines und Cloud-Umgebungen (AWS, Azure, GCP oder OCI).
• Kenntnisse in Docker, Kubernetes und Tests verteilter Systeme.
• Erfahrung mit Vektordatenbanken und KI-Frameworks wie LangChain, LangGraph oder ähnlichen Tools.
• Starke analytische, Debugging- und Problemlösungsfähigkeiten mit Fokus auf Systemzuverlässigkeit und -leistung.
• Fähigkeit, Engineering-Teams zu beeinflussen und die Einführung neuer KI-gesteuerter QA-Praktiken voranzutreiben.
• Bevorzugte Erfahrung in AI Red Teaming, Sicherheitstests, MLOps oder Beobachtbarkeitstools für KI-Systeme.
• Bachelor- oder Master-Abschluss in Informatik, Ingenieurwesen, KI/ML oder gleichwertige praktische Erfahrung.

Vorteile:

• Wettbewerbsfähige Vergütung mit leistungsbasierten Wachstumschancen.
• Flexible Arbeitsmodelle, einschließlich Hybrid-, Remote- oder Büroarbeitsmodellen, je nach Rollenausrichtung.
• Umfassende Gesundheits- und Wellnessunterstützungsprogramme.
• Unterstützung bei Lernen und Entwicklung, einschließlich Zertifizierungen, Schulungen und Ressourcen zur KI-Weiterbildung.
• Einblick in globale Projekte und modernste KI-Technologien.
• Inklusive und vielfältige Unternehmenskultur mit aktiven Mitarbeitergemeinschaften.
• Karrierewachstumsmöglichkeiten durch Mentoring, Innovationsinitiativen und bereichsübergreifende Zusammenarbeit.
• Bezahlte Freizeit, Feiertage und Programme zur Unterstützung der Work-Life-Balance.