Senior Data Streaming Platform Engineer

Wir suchen einen hochqualifizierten und motivierten Streaming Platform Engineer, der unser Data Streaming Platform Team verstärkt. Diese einzigartige Hybridrolle kombiniert die Disziplinen Plattform-, Software- und Datenengineering, um unsere leistungsstarke, Echtzeit-Datenstreaming-Plattform zu entwickeln, zu skalieren und zu warten. Der ideale Kandidat sollte eine Leidenschaft für die Architektur robuster, skalierbarer Systeme haben, um datengestützte Produkte und Dienstleistungen in großem Maßstab zu ermöglichen.

Ihre Mission:

• Entwerfen, bauen und warten Sie die Kerninfrastruktur für unsere Echtzeit-Datenstreaming-Plattform und gewährleisten Sie hohe Verfügbarkeit, Zuverlässigkeit und geringe Latenz.
• Implementieren und optimieren Sie Datenpipelines und Stream-Verarbeitungsanwendungen mit Technologien wie Apache Kafka, Apache Flink und Spark Streaming.
• Zusammenarbeiten mit Software- und Datenengineering-Teams zur Definition von Ereignisschemas, Gewährleistung der Datenqualität und Unterstützung der Integration neuer Dienste in das Streaming-Ökosystem.
• Entwickeln und pflegen Sie Automatisierung und Tools für Plattformbereitstellung, Konfigurationsmanagement und CI/CD-Pipelines.
• Fördern Sie die Entwicklung von Self-Service-Tools und Workflows, die Ingenieuren helfen, ihre eigenen Streaming-Datenbedürfnisse zu verwalten, um Reibungen zu reduzieren und die Entwicklung zu beschleunigen.
• Überwachen Sie die Plattformleistung, beheben Sie Probleme und implementieren Sie Beobachtbarkeit-Lösungen (Metriken, Protokollierung, Nachverfolgung), um die Gesundheit und Stabilität der Plattform sicherzustellen.
• Bleiben Sie über die neuesten Fortschritte in Streaming- und verteilten Systemtechnologien informiert und schlagen Sie innovative Lösungen für technische Herausforderungen vor.

Ihre Geschichte:

• Starke Produktionserfahrung mit Apache Kafka und seinem Ökosystem (Confluent Cloud, Kafka Streams, Kafka Connect).
• Solides Verständnis von verteilten Systemen und ereignisgesteuerten Architekturen.
• Erfahrung im Aufbau und der Optimierung von Echtzeit-Datenpipelines für ML, Analytik und Berichterstattung unter Verwendung von Apache Flink, Spark Structured Streaming und der Integration mit latenzarmen OLAP-Systemen wie Apache Pinot.
• Praktische Erfahrung mit großen Cloud-Plattformen (AWS, GCP oder Azure), Kubernetes und Docker sowie Kenntnisse in Infrastructure as Code (Terraform).
• Erfahrung in der Integration und Verwaltung von CI/CD-Pipelines (GitHub Actions) und der Implementierung von Beobachtbarkeit-Lösungen (New Relic, Prometheus, Grafana).
• Kenntnisse in mindestens einer der Programmiersprachen Python, Typescript, Java, Scala oder Go.
• Vertrautheit mit Konzepten der Datenplattform, einschließlich Data Lakes und Data Warehouses.

Was wir bieten:

On ist ein Ort, der auf Wachstum und Fortschritt ausgerichtet ist. Wir bieten eine Umgebung, die darauf ausgelegt ist, den Menschen die Werkzeuge zu geben, um ganzheitlich zu entwickeln – aktiv zu bleiben, zu lernen, zu erkunden und zu innovieren. Unser einzigartiger Ansatz kombiniert eine unterstützende, teamorientierte Atmosphäre mit Zugang zu persönlicher Selbstfürsorge für das körperliche und geistige Wohlbefinden. On ist ein Arbeitgeber, der Chancengleichheit bietet. Wir setzen uns dafür ein, ein Arbeitsumfeld zu schaffen, das fair und inklusiv ist, in dem alle Entscheidungen im Zusammenhang mit Rekrutierung, Aufstieg und Bindung frei von Diskriminierung sind.