Applied AI Engineer – Systems & Reliability (remote/Berlin-based)

HiPeople ist die KI-Einstellungsplattform, die sich um Screening, Interviews, Bewertungen und Referenzen kümmert, damit Rekrutierungsteams sich auf das Wesentliche konzentrieren können: die Menschen. Wir arbeiten mit einigen der weltweit führenden Marken zusammen, darunter die NFL, Zapier, Celonis und DAZN. Wir suchen einen Applied AI Engineer, um das Rückgrat zu bauen, wie wir Qualität, Zuverlässigkeit und Vertrauen in unsere KI-Systeme sicherstellen, während wir auf 10 Millionen USD ARR und darüber hinaus skalieren.

In dieser Rolle wirst du direkt mit den Gründern zusammenarbeiten und eine zentrale Rolle dabei spielen, sicherzustellen, dass unsere KI-Produkte robust, messbar und produktionsbereit sind. Diese Rolle richtet sich an Personen, die großen Wert auf Qualität legen, gerne an schwierigen Systemproblemen arbeiten und KI entwickeln möchten, die tatsächlich in der realen Welt funktioniert.

Was du tun wirst:

• Bewertungssysteme und Qualitätsstandards besitzen
• Bewertungspipelines für zentrale KI-Workflows über Screening, Interviews, Bewertungen und Referenzen aufbauen und pflegen
• Metriken, Benchmarks und Akzeptanzkriterien für KI-Ausgaben definieren
• Leistung im Laufe der Zeit verfolgen (Qualitätstrends, Drift, Regressionen) und Ergebnisse im Team sichtbar machen
• Kontinuierliche Verbesserung der KI-Leistung vorantreiben
• Probleme in Prompts, Workflows und Datenpipelines identifizieren
• Verbesserungen in den Bereichen: Prompting-Strategien, Modellauswahl, Konfiguration und Feinabstimmung, Eingabedatenqualität und -vorverarbeitung, Orchestrierung und Workflow-Design entwerfen und implementieren
• Neue Systeme von „funktionierend“ (80%) auf zuverlässig und qualitativ hochwertig (95%+) bringen
• Überwachung und Stabilität sicherstellen
• Überwachung für KI-Systeme aufbauen und verbessern (z.B. Dashboards, Alarme, Nachverfolgung)
• Fehlermodi, Ausfallrisiken und Leistungsverschlechterung erkennen und verhindern
• Tests, CI und sichere Versandpraktiken vorantreiben
• KI- und Prompt-Tests in CI integrieren
• Standards und Werkzeuge definieren, damit Produkt- und Engineering-Teams sicher versenden können, ohne Regressionen einzuführen
• Als Qualitätssicherung für KI-bezogene Änderungen fungieren
• KI-Systemaudits und Compliance-Unterstützung übernehmen
• Interne und externe Audits vorbereiten und unterstützen
• Beweise, Dokumentationen und Artefakte für das Verhalten und die Kontrollen des KI-Systems bereitstellen
• Audit-Ergebnisse in konkrete Verbesserungen in Systemen und Prozessen übersetzen
• KI-Workflows produktiv machen
• KI-Workflows aufbauen und produktiv machen, die definierten Qualitäts- und Zuverlässigkeitsstandards entsprechen
• Produkt- und Engineering-Teams unterstützen, KI sauber in Produktlogik und Benutzererfahrung zu integrieren
• Sicherstellen, dass neue KI-Funktionen robust, messbar und wartbar sind, bevor sie veröffentlicht werden

Was wir suchen:

• 100% Übereinstimmung mit unseren Betriebsprinzipien
• Begeisterung für den Aufbau in Go
• Erfahrung mit KI/ML-Systemen, LLMs oder datenintensiven Anwendungen
• Hohe Eigenverantwortung und Aufmerksamkeit für Details
• Starkes Interesse an Qualität, Zuverlässigkeit und Systemleistung
• Fähigkeit, komplexe Systeme zu debuggen
• Klare Kommunikations- und Dokumentationsfähigkeiten
• Komfort bei der Verbesserung von Systemen und Prozessen
• Erfahrung mit Bewertungsmethoden, Metriken oder Experimenten ist ein großer Vorteil
• Vertrautheit mit Überwachung, CI/CD und Produktionssystemen ist ein Plus

Logistik: Diese Rolle ist remote oder vor Ort in unserem Büro in Berlin. Wir bieten derzeit keine Visa-Unterstützung für Deutschland an.

Vorteile:

• Direkte Verantwortung für einen der kritischsten Teile des Unternehmens: KI-Qualität und -Zuverlässigkeit
• Enger Kontakt mit den Gründern bei wichtigen Produkt- und technischen Entscheidungen
• Wettbewerbsfähiges Gehalt und bedeutende Aktienoptionen
• Bildungsstipendium zur Unterstützung des fortlaufenden Lernens und der Entwicklung
• Das beste Team, mit dem man arbeiten kann

Prozess:

• Schritt 1: KI-Bewerbungsscreening
• Schritt 2: Interview mit dem KI-Rekruter
• Schritt 3: KI-Fähigkeitsbewertung
• Schritt 4: Interview mit dem Mitgründer
• Schritt 5: Interview mit dem Team (inkl. Live-Fallstudie)
• Schritt 6: Referenzen + Angebot

Dauer: 1 Woche, Ende-zu-Ende. Wir glauben stolz an die Kraft von Vielfalt und Inklusion. Vielfalt des Denkens fördert unseren Erfolg, der nur mit einem vielfältigen Team erreicht werden kann. Wir heißen Menschen jeder Rasse, Orientierung, Geschlecht, Religion, Alter, Ethnie, Behinderung, Neurodiversität oder Identität willkommen und schätzen jede Einzigartigkeit.