Data Scientist, Core Experimentation

Über das Team

Das Statsig-Team im Unternehmen baut und betreibt die Experimentierplattform, die die Produktentwicklung, Messung und Entscheidungsfindung im gesamten Unternehmen unterstützt. Wir arbeiten eng mit Produkt-, Ingenieur- und Infrastrukturteams zusammen, um sicherzustellen, dass Experimente vertrauenswürdig, statistisch rigoros und skalierbar für die Bedürfnisse von KI-Produkten sind. Unsere Mission ist es, Teams zu helfen, bessere Entscheidungen durch zuverlässige Experimente zu treffen. Wir legen großen Wert auf statistische Korrektheit, pragmatische Lösungen und den Aufbau von Systemen, denen Forscher und Ingenieure in großem Maßstab vertrauen können. Das Team arbeitet an der Schnittstelle von Experimentiermethodik, Dateninfrastruktur, kausaler Inferenz und Produktanalytik.

Über die Rolle

Wir stellen einen Data Scientist auf Staff-Ebene ein, um die Evolution der Kern-Experimentierplattform des Unternehmens zu leiten. Diese Rolle konzentriert sich auf die Verbesserung der statistischen Rigorosität, Zuverlässigkeit und praktischen Nutzbarkeit von Experimenten im gesamten Unternehmen. Sie werden an einigen der schwierigsten Probleme im Online-Experimentieren arbeiten: Erkennung von Stichprobenverhältnisabweichungen, Varianzreduktion, Bias-Minderung, Metrikdesign, ausgelöste Analysen, heterogene Behandlungseffekte, sequenzielles Testen und Experimente in komplexen ML-Systemen. Sie werden auch helfen, fortgeschrittene statistische Konzepte in pragmatische Systeme und Produkterfahrungen zu übersetzen, die Teams tatsächlich nutzen können. Dies ist eine hoch technische Rolle mit erheblichem Einfluss auf Methodik, Plattformarchitektur und bewährte Praktiken im Experimentieren.

In dieser Rolle werden Sie:

• Die statistische Richtung und technische Strategie für die Experimentierplattform des Unternehmens vorantreiben.
• Experimentiermethoden entwerfen und verbessern, die in Produkt- und Forschungsteams verwendet werden.
• Pragmatische Lösungen für reale Herausforderungen im Experimentieren entwickeln, wobei Rigor und betriebliche Einfachheit in Einklang gebracht werden.
• Die Zuverlässigkeit und Vertrauenswürdigkeit von Experimentergebnissen verbessern, einschließlich der Erkennung und Verhinderung von Bias, Protokollierungsproblemen und Datenqualitätsfehlern.
• Skalierbare analytische Systeme und Pipelines in Python und verteilten Rechenumgebungen entwickeln.
• Mit Ingenieuren und Produktteams zusammenarbeiten, um das Experimentdesign, die Metrikqualität und die Entscheidungspraktiken zu verbessern.
• Untersuchungen zu komplexen Anomalien im Experimentieren und Messfehlern leiten.
• Bewährte Praktiken für die Governance, Interpretation und statistische Korrektheit von Experimenten etablieren.
• Andere Data Scientists mentorieren und das technische Niveau für Experimentieren und kausale Inferenz insgesamt erhöhen.

Sie könnten in dieser Rolle erfolgreich sein, wenn Sie:

• Erfahrung im Aufbau, der Skalierung oder dem Betrieb von Experimentierplattformen in einem großen Technologieunternehmen haben.
• Tiefe Expertise in Statistik, kausaler Inferenz und Methodik des Online-Experimentierens besitzen.
• Ein starkes Verständnis für praktische Herausforderungen im Experimentieren in Produktionssystemen haben.
• Erfahrung in Bereichen wie Varianzreduktion, CUPED, sequenzielles Testen, SRM-Erkennung, Metrikdesign oder heterogene Effekte haben.
• Starke Programmier- und Systemfähigkeiten in Python und großen Datenverarbeitungsframeworks (z.B. Spark) besitzen.
• Erfahrung im Entwerfen analytischer Datenmodelle und skalierbarer Experimentierpipelines haben.
• Die Fähigkeit haben, komplexe statistische Konzepte klar an technische und nicht-technische Zielgruppen zu kommunizieren.
• Eine Erfolgsbilanz im Einfluss auf technische Strategien durch praktische technische Führung haben.
• Erfahrung in großangelegtem Produktexperimentieren, ML-Experimentieren, Rankingsystemen, Marktplatzsystemen oder ähnlichen hochskalierbaren Experimentierbereichen ist sehr wertvoll.

Arbeitsplatz & Standort

Diese Rolle ist in Bellevue angesiedelt. Wir verwenden ein hybrides Arbeitsmodell und schätzen die persönliche Zusammenarbeit für technisches Design, Iteration und funktionsübergreifende Partnerschaften.

Vergütungsbereich: 293.000 - 325.000 USD

Wir sind ein Arbeitgeber, der Chancengleichheit bietet, und diskriminieren nicht aufgrund von Rasse, Religion, Farbe, nationaler Herkunft, Geschlecht, sexueller Orientierung, Alter, Veteranenstatus, Behinderung, genetischen Informationen oder anderen anwendbaren rechtlich geschützten Merkmalen.