Gestalte die Datenplattform von morgen – mit technischer Verantwortung und echtem Impact im öffentlichen Sektor.
Deine Rolle
Du möchtest nicht einfach bestehende Dateninfrastrukturen betreuen, sondern Data Engineering strategisch gestalten und zukunftsfähige Datenplattformen von Grund auf entwickeln?
Deine Aufgaben
- Technische Führung: Du steuerst die Data-Engineering-Themen im Projekt, treibst strategische Entscheidungen voran und übernimmst die technische Gesamtverantwortung für diesen Bereich.
- Entwicklung & Architektur: Du konzipierst, entwickelst und optimierst ETL-/ELT-Pipelines sowie skalierbare Datenarchitekturen.
- Skalierbarkeit & Performance: Du stellst sicher, dass Datenpipelines auch bei wachsenden Datenmengen und zusätzlichen Datenquellen effizient, performant und wartbar bleiben.
- Engineering-Standards: Du definierst und etablierst Best Practices für Pipeline-Design, Testing, Monitoring, Betrieb und Performance.
- Technische Qualität: Du verantwortest Code Reviews, bewertest Architekturänderungen und stellst die Einhaltung technischer Qualitätsstandards sicher.
- Hands-on Engineering: Du arbeitest aktiv mit dem Cloudera-/Apache-Stack sowie modernen Data-Stack-Technologien.
- Data Governance & Security: Du gewährleistest Datenqualität, Zugriffskontrolle, Datenschutz und Datensicherheit über den gesamten Datenlebenszyklus hinweg.
Das bringst du mit
- Mehrjährige fundierte Berufserfahrung im Data Engineering sowie Erfahrung in einer technisch führenden Rolle.
- Nachweisbare Expertise im Design und in der Entwicklung skalierbarer ETL-/ELT-Pipelines.
- Erfahrung mit Batch- und Streaming-Verarbeitung.
- Praxiserfahrung mit modernen Data-Stack-Technologien, beispielsweise dbt und S3/Object Storage.
- Sehr gutes Verständnis von Datenarchitektur, Skalierbarkeit, Wartbarkeit und modernen Data-Engineering-Praktiken.
- Sehr gute SQL-Kenntnisse sowie fundierte Programmierkenntnisse, idealerweise in Python und/oder Java.
- Erfahrung mit Code Reviews, Engineering-Standards und Performance-Optimierung.
- Die Fähigkeit, technische Themen eigenständig zu verantworten, Entscheidungen zu treffen und Lösungen hands-on umzusetzen.
- Erfahrung in der Entwicklung individueller Datenpipelines von Grund auf – auch ohne vorgefertigte Frameworks oder spezifische Cloud-Funktionalitäten.
- Erfahrung in der Verarbeitung unterschiedlichster Datenformate, beispielsweise tabellarischer Daten, JSON, Texten, Bildern und weiteren unstrukturierten Daten.
- Erfahrung im Umgang mit vertraulichen, sicherheitskritischen und personenbezogenen Daten.
- Sehr gute Deutsch- und Englischkenntnisse.
Nice to have: Kenntnisse im Cloudera-Tooling und im Apache-Ökosystem. Diese sind von Vorteil, aber keine Voraussetzung.
#J-18808-Ljbffr
Senior Data Engineer Arbeitgeber: NovaSearch GmbH
Unser Kunde ist ein hervorragender Arbeitgeber, der seinen Mitarbeitern die Möglichkeit bietet, an anspruchsvollen Infrastrukturprojekten in einem internationalen Umfeld zu arbeiten. Mit einem modernen Remote-Arbeitsmodell und einer Unternehmenskultur, die individuelle Weiterbildungs- und Entwicklungsmöglichkeiten fördert, sorgt das Unternehmen für eine ausgewogene Work-Life-Balance und langfristige Karriereperspektiven. Die Kombination aus wirtschaftlicher Stabilität und innovativen Projektstrukturen macht diesen Arbeitgeber besonders attraktiv für Fachkräfte im Bauwesen.
