Data Engineer (gn)

Einleitung

Für meinen Stammkunden suche ich einen Data Engineer (gn) . Das international aufgestellte Hamburger Unternehmen beschäftigt insgesamt rund 2000 Mitarbeitende, davon ca. 60 innerhalb der IT.

Deine Aufgaben

• Aufbau und Wartung effizienter und skalierbarer Datenpipelines zur Erfassung, Verarbeitung und Speicherung von Daten aus verschiedenen Quellen.
• Sicherstellung der Datenqualität, -integrität und -verfügbarkeit .
• Gestaltung und Implementierung von Datenbankschemata und -strukturen , die eine optimale Speicherung, Abfrage und Verarbeitung der Daten ermöglichen.
• Entwicklung, Verwaltung und Optimierung von ETL-Prozessen , um Daten aus verschiedenen Quellen zu extrahieren, zu transformieren und in Zielsysteme zu laden.
• Sicherstellung einer zeitnahen und präzisen Datenbereitstellung .
• Nutzung von Snowflake und Azure Data Factory zur Verwaltung cloudbasierter Data-Warehouse- und Datenintegrationsprozesse .
• Sicherstellung einer effizienten Datenspeicherung und -zugänglichkeit .
• Integration von IoT-Daten mithilfe von Azure IoT Hub , um eine Echtzeit-Datenverarbeitung und -analyse zu ermöglichen.
• Implementierung und Verwaltung von Daten-Workflows mit Apache Airflow , um ETL-Prozesse und andere datenbezogene Aufgaben zu automatisieren und zu steuern.

Dein Profil

• Abgeschlossenes Bachelor-Studium in Informatik, Informationstechnologie, Ingenieurwesen oder einem verwandten Bereich.
• Mindestens 5 Jahre Erfahrung als Data Engineer oder in einer vergleichbaren Position.
• Fundierte Erfahrung mit Datenpipeline-Tools und -Techniken .
• Sehr gute Kenntnisse in Snowflake und Azure Data Factory .
• Erfahrung mit der Integration von IoT-Daten über Azure IoT Hub .
• Praktische Erfahrung mit Apache Airflow zur Workflow-Automatisierung .
• Expertenwissen in ETL-Prozessen und den dazugehörigen Tools.
• Starke SQL-Kenntnisse und Erfahrung mit relationalen Datenbanken.
• Vertraut mit Datenmodellierungsprinzipien und Best Practices .
• Erfahrung mit Datenvisualisierungstools , insbesondere Microsoft Power BI .
• Kenntnisse in Cloud-Computing-Konzepten , insbesondere Microsoft Azure .
• Erfahrung mit weiteren Cloud-Plattformen wie AWS oder Google Cloud .
• Vertraut mit Big-Data-Technologien wie Hadoop, Spark oder Kafka .
• Erfahrung mit Python oder anderen Skriptsprachen.
• Kenntnisse in Data Governance und Datenqualitäts-Frameworks .
• Sehr gute Deutsch- und Englischkenntnisse erforderlich .

Benefits

• Eine unbefristete Festanstellung in Vollzeit (37,5 Std./ Woche bei Vollzeit)
• Flexibles Arbeitszeitmodell
• Eine hybride Homeoffice-Lösung (2-4 Tage Homeoffice/ Woche möglich)
• 30+ Urlaubstage
• Interne & externe Weiterbildungsangebote
• Urlaubsgeld, Bonuszahlungen, BAV & VWL
• Fitnessstudio vor Ort, Kantine mit Essenszulagen, Fahrtkostenzuschuss, Jobrad, Mitarbeiter- & Teamevents

#J-18808-Ljbffr