Auf einen Blick
- Aufgaben: Entwickle und pflege moderne Datenpipelines mit Spark, SQL und anderen Technologien.
- Unternehmen: Innovatives Unternehmen im Bereich Datenengineering mit Fokus auf Zusammenarbeit.
- Vorteile: Attraktives Gehalt, Gesundheitsleistungen und Möglichkeiten zur beruflichen Weiterentwicklung.
- Weitere Informationen: Vielfältige Karrieremöglichkeiten und ein inklusives Arbeitsumfeld.
- Warum dieser Job: Gestalte skalierbare Datenlösungen und arbeite an spannenden Projekten in einem dynamischen Umfeld.
- Qualifikationen: Mindestens 5 Jahre Erfahrung mit modernen Datentechnologien und starke SQL-Kenntnisse.
Das prognostizierte Gehalt liegt zwischen 60000 - 80000 € pro Jahr.
Startdatum: Juli/August 2026
Dauer: 24 Monate
Arbeitsaufwand: 100%
Hauptverantwortlichkeiten:
- Entwurf, Entwicklung und Wartung von End-to-End-Datenpipelines (ETL/ELT) unter Verwendung von Spark, SQL und verwandten Technologien.
- Implementierung von Geschäftslogik, Datenverwaltung, Sicherheits- und Aufbewahrungsanforderungen innerhalb der Pipelines.
- Übersetzung von Geschäfts- und technischen Anforderungen in skalierbare Datenlösungen und detaillierte Designs.
- Zusammenarbeit mit Geschäftspartnern, Produktverantwortlichen und technischen Teams zur Behebung von Datenbedürfnissen und -problemen.
- Beitrag zur Datenarchitektur, um ein skalierbares und leistungsstarkes Systemdesign sicherzustellen.
- Unterstützung der kontinuierlichen Lieferung durch effektive Governance, Transparenz und Kommunikation.
- Aktualisierung über aufkommende Datentechnologien und Unterstützung von Proof-of-Concept-Initiativen.
Erforderlicher Hintergrund:
- Über 5 Jahre Erfahrung mit modernen Datentechnologien.
- Starke Erfahrung im Aufbau von Datenaufnahme-Pipelines für Data Warehouses, Data Lakes oder Lakehouse-Architekturen.
- Praktische Expertise mit Big Data und Open-Source-Tools (z. B. Spark, Hadoop, Hive, Kafka, dbt, ELK), idealerweise in einer Cloudera-Umgebung.
- Kenntnisse in Python und starke SQL-Fähigkeiten.
- Solides Verständnis von Datenmodellierung, skalierbarem Systemdesign und Best Practices im Bereich Datenengineering.
- Erfahrung im Finanzdienstleistungssektor (z. B. Handelslebenszyklus, Risikomanagement).
- Vertrautheit mit Lakehouse-Technologien wie Apache Iceberg.
- Erfahrung mit relationalen und NoSQL-Datenbanken (z. B. Postgres, SQL Server, Cassandra).
- Einblick in Workflow-Orchestrierung (Airflow, NiFi), Streaming (Kafka, Spark Streaming) und CI/CD-Pipelines.
- Kenntnisse in agilen Methoden und Testpraktiken.
- Erfahrung mit Cloud-Plattformen (Databricks, Snowflake, Azure Synapse) - wünschenswert.
- Verständnis von Microservices und APIs (REST/SOAP) - wünschenswert.
- Einblick in .NET/C# - wünschenswert.
Sie bringen starke Kommunikationsfähigkeiten mit. Wir glauben an Chancengleichheit für alle und ermutigen aktiv Bewerbungen aus unterschiedlichen Hintergründen, Erfahrungen und Perspektiven.
Source Group International Ltd fungiert als Arbeitsvermittler in Bezug auf diese Stelle.
Data Engineer Arbeitgeber: SGI
Als Arbeitgeber bietet Source Group International Ltd eine dynamische und unterstützende Arbeitsumgebung für Data Engineers, die an modernen Datenplattformen arbeiten möchten. Mit einem klaren Fokus auf Mitarbeiterentwicklung und kontinuierlichem Lernen, fördern wir eine Kultur der Zusammenarbeit und Innovation, während wir gleichzeitig sicherstellen, dass unsere Mitarbeiter Zugang zu den neuesten Technologien und Tools haben. Unsere Lage ermöglicht es uns, ein vielfältiges Team zu bilden, das unterschiedliche Perspektiven und Erfahrungen einbringt, was zu einer inspirierenden und produktiven Arbeitsatmosphäre führt.
