Client Service Risk Manager - AI Evaluation and Testing

Sie sind jemand, der in einer leistungsstarken Umgebung gedeiht und eine Wachstumsmentalität sowie einen unternehmerischen Geist mitbringt, um bedeutende Herausforderungen anzugehen, die einen echten Einfluss haben. Im Gegenzug für Ihren Antrieb, Ihre Entschlossenheit und Ihre Neugier bieten wir die Ressourcen, Mentoring und Möglichkeiten, um Ihnen zu helfen, schnell Ihr Fachwissen zu erweitern, sich zu einem vielseitigen Fachmann zu entwickeln und zu Arbeiten beizutragen, die wirklich einen Unterschied machen.

Wenn Sie zu uns kommen, werden Sie Folgendes haben:

• Kontinuierliches Lernen: Unsere Lern- und Ausbildungs-Kultur, unterstützt durch strukturierte Programme, dreht sich darum, Ihnen beim Wachsen zu helfen, während wir eine Umgebung schaffen, in der Feedback klar, umsetzbar und auf Ihre Entwicklung fokussiert ist.
• Eine Stimme, die zählt: Von Tag eins schätzen wir Ihre Ideen und Beiträge. Sie werden einen greifbaren Einfluss haben, indem Sie innovative Ideen und praktische Lösungen anbieten, während Sie unser unerschütterliches Engagement für Ethik und Integrität aufrechterhalten.
• Globale Gemeinschaft: Mit Kollegen aus über 65 Ländern und mehr als 100 verschiedenen Nationalitäten fördert die Vielfalt unserer Firma Kreativität und hilft uns, die besten Lösungen zu finden.
• Außergewöhnliche Vorteile: Neben einem wettbewerbsfähigen Gehalt bieten wir ein umfassendes Leistungspaket, um das ganzheitliche Wohlbefinden für Sie und Ihre Familie zu ermöglichen.

Sie werden innerhalb der Technologie-Risiko-Funktion der Firma als Client Service Risk Manager für die Bewertung und Prüfung von KI arbeiten und sicherstellen, dass die Fähigkeit unserer Firma zur Bewertung und Validierung von KI-Systemen, einschließlich der intern verwendeten und von Beratern in Kundenkontexten entwickelten Systeme, stark ist.

Als Leiter der KI-Bewertung und -Prüfung definieren Sie die Vision und den strategischen Fahrplan für KI-Kontrollziele und Tests. Sie werden Rahmenbedingungen, Anforderungen und Richtlinien festlegen, um das Verhalten zu bewerten und die Zuverlässigkeit (einschließlich Genauigkeit, Vorurteile und andere Faktoren) über verschiedene Modalitäten hinweg sicherzustellen.

Zusätzlich werden Sie die Anforderungen für Werkzeuglösungen definieren und priorisieren, die die KI-Governance, Beobachtbarkeit und Tests für alle relevanten KI-Systeme und -Agenten unterstützen. Sie werden auch Rahmenbedingungen und Methoden zur Durchführung von Red-Team-Angriffen auf KI-Systeme entwickeln oder validieren.

Sie werden eng mit der ersten Verteidigungslinie zusammenarbeiten, um Bewertungs-Gates zu implementieren und eine Kontrollumgebung mit geeigneten technischen Sicherheitsvorkehrungen aufzubauen, um die Einhaltung der geltenden Vorschriften (z.B. dem EU AI Act) sicherzustellen.

Sie berichten direkt an den Associate Director of Client Service Risk, Technology Knowledge & Frameworks, innerhalb der globalen Risiko-Funktion der Firma. Sie werden eng mit den Rechts-, Risiko-, Technologie- und Produktteams zusammenarbeiten, um konsistente und skalierbare RAI-Kontrollziele und Testmethoden zu entwickeln.

Sie unterstützen Aktualisierungen bestehender robuster Richtlinien und Standards im Einklang mit Entwicklungen in den KI-Fähigkeiten. Ihre Zusammenarbeit wird sich auf verschiedene Rollen und Funktionen innerhalb der Firma erstrecken, einschließlich der Führungsebene, der Sie Ihre Strategie und Ihr Programm präsentieren, Fortschritte berichten und Auswirkungen demonstrieren werden.

Qualifikationen:

• U.S. Bachelor-Abschluss oder gleichwertige Berufserfahrung erforderlich
• 8+ Jahre Erfahrung in Trust & Safety (KI/ML), Risiko oder Sicherheitsbereichen mit Hintergrund in Data Science
• 5+ Jahre Erfahrung in der Leitung komplexer funktionsübergreifender Projekte
• Vertrautheit mit KI-Sicherheit, Tests und Validierung sowie Governance
• Kenntnis von Methoden zur KI-Bewertung und Fähigkeit, Bewertungsergebnisse mit Sicherheitsvorkehrungen und Kontrollen zu verknüpfen
• Nachgewiesene Fähigkeit, komplexe ethische Herausforderungen in umsetzbare Richtlinien und Rahmenbedingungen zu übersetzen
• Erfahrung in der Zusammenarbeit mit Ingenieur- und Produktteams zur Erstellung von Werkzeugen, Lösungen oder Automatisierung
• Fähigkeit, persönlich zu arbeiten (Teampläne und Bürostandorte können variieren)
• Ausgezeichnete Führungs- und Kommunikationsfähigkeiten
• Ausgezeichnete schriftliche und mündliche Kommunikationsfähigkeiten sowie zwischenmenschliche Fähigkeiten