Auf einen Blick
- Aufgaben: Entwickle und betreibe leistungsstarke Datenflüsse in der Google Cloud für Analytics und Machine Learning.
- Unternehmen: Schwarz Digits, Teil der Schwarz Gruppe, treibt digitale Transformation in Europa voran.
- Vorteile: Attraktives Gehalt, flexible Arbeitszeiten, Weiterbildungsmöglichkeiten und ein dynamisches Team.
- Weitere Informationen: Agile Arbeitsumgebung mit großartigen Entwicklungschancen und interdisziplinärer Zusammenarbeit.
- Warum dieser Job: Gestalte die digitale Entscheidungsfreiheit mit modernster Technologie und innovativen Projekten.
- Qualifikationen: Mehrjährige Erfahrung im Data Engineering und fundierte Kenntnisse in Google Cloud und Echtzeitdatenverarbeitung.
Das prognostizierte Gehalt liegt zwischen 45000 - 65000 € pro Jahr.
Einleitungstext: Schwarz Digits schafft das technologische Fundament für digitale Entscheidungsfreiheit in Europa. Als IT- und Digitalsparte der Schwarz Gruppe entwickeln und verantworten wir einerseits die IT-Infrastrukturen für die Handelssparten Lidl und Kaufland sowie die Schwarz Produktion und PreZero. Gleichzeitig agieren wir als unabhängiger Anbieter am externen Markt, um Unternehmen in ganz Europa bei ihrer digitalen Transformation zu unterstützen. Unsere Kernleistungen bündeln wir in den Bereichen Cloud, Cyber Security, Data AI, Communication und Workspace. Trage auch du zur digitalen Entscheidungsfreiheit in Europa bei.
Deine Aufgaben:
- Data Product Engineering: Du konzipierst, entwickelst und betreibst hochperformante Batch- und Streaming-Datenflüsse in unserem zentralen Google Cloud Data Lakehouse für Analytics- und Machine-Learning-Anwendungsfälle.
- Architektur Skalierung: Du optimierst die Cloud-Architektur (GCP), stellst die Skalierbarkeit unserer Lösungen sicher und entwickelst unsere Standards für die Datenverarbeitung in Echtzeit und Batch weiter.
- Software Excellence: Du wendest moderne Software-Engineering-Methoden an und setzt neue Maßstäbe für CI/CD, automatisiertes Testing und Deployment-Prozesse in der Datenorganisation.
- Framework-Mitgestaltung: Du unterstützt die Weiterentwicklung unserer zentralen Orchestrierungs-Tools (auf Basis von Airflow und dbt), um die Effizienz und Qualität der Datenbereitstellung unternehmensweit zu steigern.
- Datenqualität Governance: Du implementierst automatisierte Validierungsprozesse (z. B. für Streaming-Events) und stellst die Einhaltung von Sicherheits- und Datenschutzstandards sicher.
- Agile Kollaboration: Du arbeitest in interdisziplinären Teams eng mit Product Ownern, Data Scientists und Fachbereichen zusammen, um komplexe Business-Anforderungen in technische Lösungen zu übersetzen.
Dein Profil:
- Erfahrung: Mehrjährige fundierte Erfahrung im Data Engineering, Big Data Umfeld oder Software Engineering, idealerweise in einer Senior-Rolle.
- Cloud-Streaming-Expertise: Du bringst fundierte Kenntnisse in Cloud-Infrastrukturen mit (Google Cloud Platform) sowie tiefe Erfahrung in der Verarbeitung von Echtzeitdaten mit Apache Kafka.
- Tech-Stack: Sehr gute Kenntnisse in Python und Spark. Du bist sicher im Umgang mit Containerisierung (Kubernetes/Docker).
- Orchestrierung Transformation: Erfahrung mit Tools wie Apache Airflow und Transformationen via dbt ist von großem Vorteil.
- Software Best Practices: Du bist sicher im Umgang mit dem Softwareentwicklungszyklus, Versionsverwaltung (Git) sowie DevOps-Prinzipien und automatisierten Tests.
- Konzeptionelle Stärke: Du begeisterst dich für moderne Architektur-Konzepte wie Data Lakehouses und Data Mesh und hast Freude daran, technologische Standards aktiv mitzugestalten.
- Persönlichkeit: Analytisches Denkvermögen, ein agiles Mindset sowie eine eigenverantwortliche und lösungsorientierte Arbeitsweise.
- Sprachen: Sehr gute Englischkenntnisse; Deutschkenntnisse sind bevorzugt.
Senior Data Engineer - Google Cloud Platform Berlin (m/w/d) - System Engineering / Admin, Datenbankentwicklung/BI, Ingenieur Arbeitgeber: Schwarz Digits
Schwarz Digits ist ein hervorragender Arbeitgeber, der seinen Mitarbeitern die Möglichkeit bietet, an der digitalen Transformation Europas aktiv mitzuwirken. Mit einem dynamischen Arbeitsumfeld in Berlin profitieren Sie von schnellen Entscheidungswegen und einer offenen Unternehmenskultur, die Kreativität und Eigenverantwortung fördert. Zudem erwarten Sie vielfältige Entwicklungsmöglichkeiten und ein starkes Team, das auf modernste Technologien setzt und Ihnen die Chance gibt, Ihre Fähigkeiten im Bereich Data Engineering und Cloud-Technologien weiter auszubauen.
