Staff Engineer - Data Platform (m|w|d)

Zuverlässige Pipelines, resiliente Infrastruktur und eine skalierbare Datenplattform sind die Grundlage jeder datengestützten Entscheidung bei idealo. Als Staff Engineer gestalten Sie das technische Fundament der Plattform, auf das täglich Tausende von Datenarbeitslasten angewiesen sind, und treiben die strategischen Initiativen voran, die definieren, was als Nächstes möglich ist. Diese Rolle kombiniert Plattformengineering, Cloud-Architektur und Datenengineering.

In Ihrer neuen Rolle werden Sie:

• Cloud-native Plattformkomponenten, Infrastrukturautomatisierung und Pipeline-Frameworks mit einem starken Fokus auf Leistung, Sicherheit und Wartbarkeit entwerfen und entwickeln.
• Technische Initiativen innerhalb und über das Team hinweg leiten, um die Plattformfähigkeiten mit den Geschäfts- und Produktbedürfnissen in Einklang zu bringen.
• Technische Risiken frühzeitig identifizieren und Architekturentscheidungen sowie technische Konzepte über Projektphasen hinweg nachvollziehbar halten.
• Kontinuierliche Verbesserungen in CI/CD-Pipelines, Infrastruktur als Code, Beobachtbarkeit und Monitoring vorantreiben.
• Technologieentscheidungen als klare Abwägungen strukturieren - Leistung, Kosten, Wartbarkeit und Integration bewerten, um strategische Entscheidungen zu informieren.

Sie spielen eine Schlüsselrolle bei der Gestaltung zweier der strategischsten Plattforminitiativen von idealo: Personalisierung und Data-as-a-Service (DaaS). Für die Personalisierung definieren und bauen Sie eine nächste Generation von datenschutzfreundlichen Plattformen von Grund auf, indem Sie die technische Vision, Architektur und Ingenieurstandards festlegen, die hochrelevante Erfahrungen über die gesamte Customer Journey für Millionen von Nutzern ermöglichen. Parallel dazu treiben Sie die Evolution unserer DaaS-Plattform voran, indem Sie neue Fähigkeiten rund um die Verarbeitung von Echtzeitdaten, Streaming-Technologien wie Kafka und Kinesis sowie ML/AI-Integration erforschen, prototypisieren und validieren.

Sie werden skalierbare Datenprodukte entwickeln, die die Datenmonetarisierung ermöglichen und neue Geschäftsmöglichkeiten schaffen. In Zusammenarbeit mit den Teams für Datenengineering, Softwareengineering, Cloud, Plattform, Produkt und maschinelles Lernen stimmen Sie die technische Richtung ab, bewältigen komplexe bereichsübergreifende Herausforderungen und verwandeln frühe Konzepte in produktionsbereite Plattformen, die die langfristige Technologie- und Datenstrategie von idealo prägen.

Sie werden Ingenieure durch technische Anleitung, Architekturgespräche und Code-Reviews betreuen und eine kollaborative Ingenieurkultur fördern, die sich auf nachhaltige technische Exzellenz konzentriert.

Fähigkeiten & Anforderungen

• Sie haben cloud-native Plattformen auf AWS aufgebaut und betrieben, mit einem starken Fokus auf Software- und Infrastrukturengineering, verteilte Systeme und operationale Exzellenz.
• Sie haben praktische Erfahrung mit AWS-Diensten, einschließlich Glue Catalog, Glue ETL mit PySpark, S3, Lake Formation, Kafka, Kinesis, Lambda, ECS oder EKS und CloudWatch.
• Sie haben Infrastruktur-als-Code-Tools wie Terraform, AWS CDK oder CloudFormation sowie GitHub und GitHub Actions verwendet.
• Kenntnisse in SageMaker und Bedrock AgentCore sind von Vorteil.
• Sie haben Erfahrung mit Workflow-Orchestrierung und Datenpipeline-Frameworks, idealerweise einschließlich Airflow oder Astronomer.
• Sie haben mit PySpark oder vergleichbaren verteilten Verarbeitungsframeworks in Python gearbeitet.
• Sie haben Erfahrung mit Containerisierung und Orchestrierungstechnologien, einschließlich Docker und Kubernetes, sowie modernen CI/CD-Praktiken und DevOps-Tools.
• Sie verstehen Softwarequalität, Sicherheits- und Zuverlässigkeitspraktiken, einschließlich Authentifizierung, Verschlüsselung, automatisierten Tests und sicherer Softwareentwicklung.
• Sie verstehen Konzepte des Datenengineerings, einschließlich Pipeline-Design, Datenmodellierung, ETL-Muster, ML Ops, Datenqualität und Pipeline-Beobachtbarkeit.
• Sie können dieses Wissen nutzen, um fundierte architektonische Entscheidungen zu treffen und effektiv mit Dateningenieuren zusammenzuarbeiten.
• Sie sind mit Themen der Datenverwaltung und Compliance, einschließlich GDPR, Datenherkunft, Metadatenmanagement und Zugriffskontrolle durch IAM und RBAC, vertraut.
• Sie können diese Themen in konkrete Plattformanforderungen übersetzen.
• Sie haben komplexe technische Initiativen geleitet, architektonische Entscheidungen beeinflusst und die Ingenieurarbeit über Teams hinweg ohne formale Personalverantwortung abgestimmt.
• Sie übernehmen Verantwortung und treiben Themen unabhängig voran.
• Sie äußern sich und hinterfragen Ideen konstruktiv, während Sie offen für unterschiedliche Perspektiven bleiben.

Bei idealo können Sie erwarten:

• Sie möchten sich weiterbilden? Wir nehmen Ihre persönlichen Entwicklungsziele ernst und bieten Ihnen neben unserem idealo Learning Hub, eLearning-Angeboten (z.B. Udemy), Coaching & Mediation auch die Möglichkeit, individuell von einem zusätzlichen Lern- und Entwicklungsetat zu profitieren.
• Und was ist mit dem Büro? Unser Büro im Herzen Berlins bietet ein kostenloses Bio-Frühstück, ausgezeichnetes kostenloses Mittagessen (vegan und vegetarisch) sowie kostenlosen Kaffee, Limonade und After-Work-Bier, zusätzlich zum „Standard-Kicker“. Es hat auch eine fabelhafte Dachterrasse mit Blick auf ganz Berlin, wo Sie sich mit Kollegen aus unserer Unternehmensgruppe vernetzen können.
• Benötigen Sie zusätzliche Unterstützung in verschiedenen Lebensbereichen? Wir bieten kostenlose Beratung und Unterstützung in allen Lebensbereichen (beruflich, privat, Familie, Gesundheit usw.) in Zusammenarbeit mit dem pme-Familienservice.
• Sie möchten volle Flexibilität auf Ihrem Weg zur Arbeit und darüber hinaus? Kein Problem mit einem Jobrad oder Deutschlandticket - und es ist auch umweltfreundlich!
• Wollen Sie fit bleiben? Wir bieten viele verschiedene Fitness- und Sportmöglichkeiten, wie z.B. eine Mitgliedschaft bei Urban Sports oder Gympass, die Ihren persönlichen Bedürfnissen entsprechen.
• Und was gibt es sonst noch? Natürlich muss der Erfolg gefeiert werden! Neben Teamevents können Sie auch große Unternehmensveranstaltungen und andere Momente der organisierten Verbindung mit anderen im Unternehmen und Ihrem Team im Laufe des Jahres erwarten!