Senior+ Software Engineer - Research Platform, Consumer Devices

Über das Team
Das Future of Computing Research-Team ist ein angewandtes Forschungsteam innerhalb der Consumer Devices-Gruppe, das sich auf die Entwicklung neuer Methoden und Modelle konzentriert, während wir unser Ziel vorantreiben, AGI zu schaffen, die der gesamten Menschheit zugutekommt.

Über die Rolle
Wir suchen einen Software Engineer, der unserem Team beitritt, um Werkzeuge und Dienste zu entwickeln, die AI-Forschung, Evaluierung und Daten-Generierungs-Workflows ermöglichen. Die beste Arbeit in dieser Rolle beginnt mit einer mehrdeutigen Designfrage und verwandelt sie in funktionierende Forschungssysteme. Sie werden eng mit Forschern, Designern und Ingenieuren zusammenarbeiten, um die Evaluierungssysteme, Pipelines zur Generierung synthetischer Daten, Überprüfungstools und unterstützende Plattformdienste zu erstellen. Das Ziel ist es, diese Workflows einfacher zu erstellen, auszuführen und zu vertrauen, ohne dass für jedes neue Designkonzept maßgeschneiderte Ingenieurdienste erforderlich sind. Sie helfen sicherzustellen, dass Forschungsartefakte einen klaren Lebenszyklus haben, Durchläufe reproduzierbar und beobachtbar sind und Ergebnisse nützliche Beweise für Produkt- und Modelltrainingsentscheidungen liefern, während die zugrunde liegenden Systeme zuverlässig und wiederverwendbar bleiben. Diese Rolle ist in San Francisco, CA, angesiedelt. Wir verwenden ein hybrides Arbeitsmodell von vier Tagen im Büro pro Woche und bieten Umzugsunterstützung für neue Mitarbeiter.

Verantwortlichkeiten
In dieser Rolle werden Sie:

• Webanwendungen, APIs, Datenmodelle und Backend-Dienste für AI-Forschungs-Workflows erstellen.
• Werkzeuge zum Erstellen und Verwalten von Evaluierungsaufgaben, Rubriken, Bewertungsinstrumenten, Suiten und Rollout-Konfigurationen entwickeln, einschließlich Workflows für die Veröffentlichung, Versionierung, Prüfung und den Austausch von Forschungsartefakten.
• Evaluierungsdurchläufe automatisieren und nützliche Berichte für Design-, Forschungs- und Ingenieurteams generieren.
• Synthetische Daten-Generierungs-Workflows für multimodale und konversationelle Forschung unterstützen, einschließlich Werkzeuge, die Transkripte, Medien und Modellvergleiche kombinieren.
• Produkt- und Forschungsfragen in messbare Szenarien, automatisierte Bewertungsinstrumente und menschliche Evaluierungskampagnen übersetzen und Maßnahmen zur Aufgabenqualität, Abdeckung, Vielfalt und semantischen Verbreitung entwickeln.
• Probleme im Anwendungscode, bei Arbeitern, Modellendpunkten, Bereitstellungen und Recheninfrastrukturen diagnostizieren und die Zuverlässigkeit durch Gesundheitsprüfungen, Beobachtbarkeit, reproduzierbare Startpfade, Datensicherheitsvorkehrungen und automatisierte Verifizierung verbessern.
• Migrations- und abhängige Änderungen über Forschungstools, Evaluierungssysteme und unterstützende Dienste leiten.
• Eng mit Designern, Modellforschern, Forschungsingenieuren und Infrastrukturteams zusammenarbeiten und Mitwirkende einarbeiten, um qualitativ hochwertige Evaluierungs- und synthetische Daten-Workflows zu erstellen.

Qualifikationen
Sie könnten in dieser Rolle erfolgreich sein, wenn Sie:

• Über 7 Jahre Berufserfahrung in der Softwareentwicklung verfügen.
• Starke Full-Stack-Erfahrung in Webanwendungen, Backend-Diensten, APIs und Datenmodellen haben, einschließlich der Verantwortung für komplexe Systeme, die mehrere Dienste oder Repositories umfassen.
• Expertise in generativer KI, multimodalen Modellen oder Systeme zur Modellevaluierung besitzen.
• Effektive interne Werkzeuge sowohl für technische als auch für nicht-technische Benutzer entwickelt haben.
• Komfortabel beim Debuggen verteilter Workflows und Produktionsinfrastrukturen sind.
• Starkes Produkturteil haben und mehrdeutige Anforderungen in konkrete Pläne übersetzen können.
• Begeistert sind, zwischen Designern und Forschern in einem multidisziplinären Team zu arbeiten und qualitative Urteile mit rigorosen Beweisen zu verbinden.
• Deutlich kommunizieren und effektiv über Ingenieurwesen, Design und Forschung hinweg arbeiten können.

Schön zu haben
Expertise in der Generierung synthetischer Daten, Simulation, konversationeller KI, Sprache, Video, Bewegung oder verkörperter Interaktion.
Erfahrung mit automatisierten Bewertungsinstrumenten, menschlicher Evaluierung, überwachten Feinabstimmungen, verstärkendem Lernen oder Plattformen für Experiment- und Datensatzmanagement.
GPU-gestützte Inferenz- oder Rollout-Workloads in sehr großem Maßstab betrieben haben.

Über das Unternehmen
Das Unternehmen ist ein KI-Forschungs- und Bereitstellungsunternehmen, das sich der Gewährleistung widmet, dass allgemeine künstliche Intelligenz der gesamten Menschheit zugutekommt. Wir erweitern die Grenzen der Fähigkeiten von KI-Systemen und streben an, sie sicher durch unsere Produkte in die Welt zu bringen. KI ist ein äußerst leistungsfähiges Werkzeug, das mit Sicherheit und den Bedürfnissen der Menschen im Mittelpunkt geschaffen werden muss, und um unser Ziel zu erreichen, müssen wir die vielen verschiedenen Perspektiven, Stimmen und Erfahrungen, die das gesamte Spektrum der Menschheit bilden, einbeziehen und wertschätzen. Wir sind ein Arbeitgeber, der Chancengleichheit bietet, und diskriminieren nicht aufgrund von Rasse, Religion, Hautfarbe, nationaler Herkunft, Geschlecht, sexueller Orientierung, Alter, Veteranenstatus, Behinderung, genetischen Informationen oder anderen anwendbaren rechtlich geschützten Merkmalen.