Member of Technical Staff - Infrastructure Engineer

Über Black Forest Labs

Wir sind das Team hinter Latent Diffusion, Stable Diffusion und FLUX – grundlegende Technologien, die verändert haben, wie die Welt Bilder und Videos erstellt. Wir entwickeln die generativen Modelle, die die Art und Weise, wie Menschen Bilder und Videos erstellen, antreiben – Werkzeuge, die von Millionen von Kreativen, Entwicklern und Unternehmen weltweit genutzt werden. Unsere FLUX-Modelle gehören zu den fortschrittlichsten der Welt, und wir fangen gerade erst an. Mit Hauptsitz in Freiburg, Deutschland, und einer wachsenden Präsenz in San Francisco, wachsen wir schnell, während wir uns treu bleiben: Forschungsexzellenz, offene Wissenschaft und der Aufbau von Technologien, die die menschliche Kreativität erweitern.

Warum diese Rolle

Wir suchen Ingenieure, die die Engine aufbauen und warten, die unsere Mission zur Entwicklung visueller Intelligenz antreibt. Vom Warten und Skalieren von Clustern bis hin zum Aufbau von Forschungsplattformen zur Beschleunigung des Innovationsprozesses operiert dieses Team mit großer Breite und Tiefe. Wir bauen die Systeme, um mehrwöchige/montagelange Schulungen möglich zu machen, Ressourcen in großem Maßstab zu orchestrieren und gleichzeitig effizient zu arbeiten, um das nächste bahnbrechende Modell zu ermöglichen. Wenn Sie besessen von verteilten Systemen im großen Maßstab, Infrastrukturzuverlässigkeit, Skalierbarkeit, Sicherheit und kontinuierlicher Verbesserung sind, wäre dieses Team perfekt für Sie.

Woran Sie arbeiten werden

• Wartung der Forschungsinfrastruktur, Sicherstellung der Gesundheit und Optimierung der Komponenten zur Maximierung der Leistung des Systems (sowohl auf Anwendungs- als auch auf Infrastrukturseite)
• Skalierung der Infrastruktur, um den wachsenden Forschungsanforderungen gerecht zu werden, während Zuverlässigkeit und Leistung aufrechterhalten werden
• Zusammenarbeit mit Forschungsteams, um ihre Infrastrukturbedürfnisse tiefgehend zu verstehen und Lösungen zu entwerfen, die Leistung mit Kosteneffizienz in Einklang bringen
• Identifizierung und Behebung von Leistungsengpässen und Kapazitäts-Hotspots durch tiefgehende Analyse verteilter Systeme im großen Maßstab
• Aufbau und Weiterentwicklung von Telemetrie- und Überwachungssystemen, um tiefe Einblicke in die Infrastrukturleistung, -nutzung und -kosten über unsere Cloud- und Rechenzentrumsflotten zu bieten
• Teilnahme an Bereitschaftsdiensten und Vorfallreaktionen zur Aufrechterhaltung der Systemzuverlässigkeit

Technischer Fokus

• Python, Bash, Go
• Kubernetes
• Nvidia GPU-Treiber und -Operatoren
• OTel, Prometheus

Was wir suchen

• Erfahrung im Aufbau oder Betrieb von groß angelegten Trainingsplattformen
• Erfahrung mit großen Rechenclustern (GPUs)
• Nachgewiesene Fähigkeit zur Fehlersuche bei Leistungs- und Zuverlässigkeitsproblemen über große verteilte Flotten
• Starke Problemlösungsfähigkeiten und die Fähigkeit, unabhängig zu arbeiten
• Starke Kommunikationsfähigkeiten und die Fähigkeit, effektiv mit internen und externen Partnern zusammenzuarbeiten
• Tiefes Wissen über moderne Cloud-Infrastruktur, einschließlich Kubernetes, Infrastructure as Code, AWS und GCP
• Erfahrung mit SLURM
• Erfahrung im Aufbau oder Betrieb von groß angelegten Trainingsplattformen

Wie wir zusammenarbeiten

Wir sind ein verteiltes Team mit echten Büros, die die Menschen tatsächlich nutzen. Je nach Ihrer Rolle werden Sie entweder mindestens 2 Tage pro Woche (oder eine volle Woche alle zwei Wochen) in Freiburg oder SF bei uns sein oder remote arbeiten mit einem monatlichen persönlichen Treffen, um verbunden zu bleiben. Wir übernehmen angemessene Reisekosten, um dies zu ermöglichen. Wir glauben, dass persönliche Zeit wichtig ist, und haben die Dinge so strukturiert, dass sie für alle zugänglich sind. Wir werden besprechen, wie dies für die Rolle während unseres Interviewprozesses aussehen wird.

Alles, was wir tun, basiert auf vier Werten:

• Besessen. Wir sind ein Forschungsinstitut an der Front. Die Wissenschaft muss stimmen, das Verständnis tief sein, das Produkt schön.
• Niedriger Ego. Die Arbeit spricht. Die beste Idee gewinnt, egal wer sie gesagt hat. Anerkennung wird geteilt. Niemand steht über einer Aufgabe.
• Mutig. Wir gehen das ehrgeizige Risiko ein. Wir liefern, wir warten nicht darauf, dass die Bedingungen perfekt sind.
• Freundlich. Menschen über Politik. Wir behandeln uns gegenseitig mit echter Wärme. Handlung ohne Empathie schafft Chaos.

Wenn sich das nach Arbeit anhört, die Ihnen Freude bereiten würde, würden wir uns freuen, von Ihnen zu hören.

Jahresgrundgehalt: 180.000–300.000 USD

Diese Rolle basiert in unserem Büro in Freiburg / San Francisco. Wir betreiben ein hybrides Modell und übernehmen angemessene Reisekosten – eine Umsiedlung wird empfohlen, aber nicht erforderlich. Wir erwarten eine bedeutende persönliche Präsenz und werden besprechen, wie das für Ihre Situation während des Prozesses aussieht.