Auf einen Blick
- Aufgaben: Entwickle und optimiere Echtzeit-Datenpipelines mit Apache Beam und GCP.
- Unternehmen: Innovatives Unternehmen im Bereich Datenengineering mit Fokus auf Zusammenarbeit.
- Vorteile: 30 Tage Urlaub, flexible Arbeitszeiten und zahlreiche Mitarbeiterangebote.
- Weitere Informationen: Dynamisches Umfeld mit großartigen Entwicklungsmöglichkeiten und einem vielfältigen Team.
- Warum dieser Job: Gestalte die Zukunft der Datenanalyse und arbeite an spannenden Projekten.
- Qualifikationen: Mindestens 4 Jahre Erfahrung in der Datenverarbeitung und starke Python-Kenntnisse.
Das prognostizierte Gehalt liegt zwischen 63000 - 77000 € pro Jahr.
Wir suchen einen hochqualifizierten Data Engineer mit tiefgreifender Expertise in der Echtzeit-Datenstreaming, Cloud-Datenplattformen (Google Cloud Platform) und Apache Beam. In dieser Rolle entwerfen, bauen und optimieren Sie Streaming-Datenpipelines, die skalierbare, zuverlässige und qualitativ hochwertige Datenflüsse ermöglichen. Sie arbeiten eng mit Datenwissenschaftlern, Analysten und Softwareingenieuren zusammen, um sicherzustellen, dass Daten effizient zusammengefügt, transformiert und bereitgestellt werden, um Analysen, KI und Business-Intelligence-Initiativen zu unterstützen.
Hauptverantwortlichkeiten:
- Entwurf, Implementierung und Wartung von Echtzeit-Streaming-Pipelines unter Verwendung von Apache Beam und GCP-Diensten (z. B. Dataflow, Pub/Sub, BigQuery, Cloud Storage).
- Entwicklung skalierbarer ETL/ELT-Lösungen für sowohl Streaming- als auch Batch-Verarbeitung.
- Implementierung von Datenstitching-Strategien zur Integration mehrerer Datenquellen in einheitliche, qualitativ hochwertige Datensätze.
- Sicherstellung der Datenqualität, Zuverlässigkeit und Beobachtbarkeit über die Pipelines.
- Optimierung von Datenworkflows hinsichtlich Leistung und Kosteneffizienz in Cloud-Umgebungen.
- Anwendung von Best Practices in CI/CD, Infrastruktur-als-Code und Monitoring für Datenpipelines.
- Beitrag zu Daten-Governance-, Sicherheits- und Compliance-Bemühungen.
Hauptanforderungen:
- 4+ Jahre Erfahrung in der Datenverarbeitung mit Fokus auf Echtzeit-/Streaming-Pipelines.
- Starke Expertise mit Google Cloud Platform (GCP): Dataflow, Pub/Sub, BigQuery, Cloud Storage, Cloud Composer usw.
- Beherrschung von Apache Beam (oder gleichwertigen Frameworks wie Spark Structured Streaming, Flink).
- Solide Programmierkenntnisse in Python.
- Erfahrung mit Datenmodellierung, Schema-Design und Datenstitching über mehrere Quellen.
- Kenntnisse in cloud-nativen DevOps-Praktiken (Terraform, Cloud Deployment Manager, CI/CD-Pipelines).
- Starke Problemlösungsfähigkeiten und die Fähigkeit, in schnelllebigen Umgebungen zu arbeiten.
- Praktische Kenntnisse von Datenbeobachtungswerkzeugen (z. B. Datadog, Prometheus, OpenLineage).
- Starkes Verständnis von ereignisgesteuerten Architekturen und Nachrichtenwarteschlangen.
- Frühere Erfahrung in hochvolumigen, geschäftskritischen Datenumgebungen.
Vorteile:
- 30 Tage bezahlter Urlaub plus die Option auf bis zu 15 Tage unbezahlten Urlaub.
- 25 Tage Workation innerhalb der EU.
- Flexible Arbeitszeiten.
- Sofa-Konzerte und Mitarbeiterevents.
- Rabatte auf Ticketkäufe & Möglichkeiten zur Aufräumung von Aufgaben.
- Unternehmensvorteile und Rabatte bei KESS.
- Zentrale Lage & Zuschuss für ein Jobticket oder Deutschlandticket.
- Fahrradleasing.
- Programm zur psychischen Gesundheit & betriebliche Altersvorsorge.
- „GoFluent“ Sprachlernplattform sowie Lunch & Learn-Sitzungen.
Wir schätzen Vielfalt und behandeln alle Bewerbungen gleich – unabhängig von Geschlecht, Herkunft, Alter, Religion, Behinderung oder sexueller Orientierung. Unterschiedliche Perspektiven bereichern unser Team und machen EVENTIM stärker.
Senior Data Streaming Engineer - Data Platform (m/f/d) Arbeitgeber: EVENTIM Tech
Als Senior Data Streaming Engineer bei EVENTIM profitieren Sie von einer dynamischen Arbeitsumgebung, die Innovation und Zusammenarbeit fördert. Wir bieten nicht nur 30 Tage bezahlten Urlaub und flexible Arbeitszeiten, sondern auch zahlreiche Möglichkeiten zur beruflichen Weiterentwicklung sowie ein starkes Engagement für Vielfalt und Inklusion. Unsere zentrale Lage und attraktive Zusatzleistungen wie Bike-Leasing und ein Mental Health-Programm machen uns zu einem hervorragenden Arbeitgeber für talentierte Fachkräfte im Bereich Datenengineering.
