Data Engineer (m/w/d) mit Fokus auf Databricks und modernen Datenarchitekturen

Deine Aufgaben

• Zusammenarbeit mit Data Scientists und Analysten zur Bereitstellung von Datenlösungen für analytische und maschinelle Anwendungen.
• Entwicklung und Optimierung von Datenpipelines mit Databricks und anderen Technologien auf der Azure Cloud Platform.
• Integration von Datenquellen und Verarbeitung großer Datenmengen aus strukturierten und unstrukturierten Quellen.
• Aufbau und Betrieb moderner, skalierbarer Datenarchitekturen für Echtzeit- und Batch-Verarbeitung.
• Implementierung und Betreuung von Streaming-Anwendungen mit Technologien wie Flink, Spark Streaming oder Kafka Streams.
• Sicherstellung von Datenqualität, Sicherheit und Performance in komplexen Datenlandschaften.
• Monitoring, Debugging und Optimierung der bestehenden Dateninfrastruktur.

Dein Profil

• Abgeschlossenes Studium in Informatik, Data Science, Ingenieurwissenschaften oder eine vergleichbare Qualifikation.
• Mehrjährige Erfahrung in der Entwicklung von Datenpipelines und in der Arbeit mit modernen Datenarchitekturen.
• Sehr gute Kenntnisse in Databricks (z.B. Delta Lake, Unity Catalog, MLFlow), Apache Spark, Apache Flink und Apache Kafka.
• Fundierte Programmierkenntnisse in Python, Scala oder Java, sowie ausgeprägte SQL-Fähigkeiten.
• Erfahrung mit der Azure Cloud Platform, Kenntnisse in anderen Cloud-Umgebungen (z. B. AWS, GCP) von Vorteil.
• Idealerweise Erfahrung mit CI/CD-Pipelines, DataOps und Infrastructure-as-Code (z. B. Terraform).
• Kenntnisse in weiteren Werkzeugen und Technologien wie Airflow, Kubernetes oder Docker sind ein Plus.
• Analytisches Denkvermögen, Teamgeist und eine strukturierte, eigenverantwortliche Arbeitsweise.
• Du sprichst fließend Deutsch und Englisch.

Deine Benefits

• Marktgerechte Vergütung, flexible Arbeitszeiten, Arbeitszeitkonto und Teilzeitmodelle, für die maximale Work-Life-Balance.
• High-End-Tools deiner Wahl: iPhone, MacBook oder ThinkPad.
• Stundenkontingent innerhalb des Steadforce "Campus" und der "Center of Competence" zur freien Verfügung für deine individuelle Weiterbildung, sowie Teilnahme an Summits, Konferenzen etc.
• Zentrales Büro mit moderner Ausstattung und guter Verkehrsanbindung.
• Motiviertes, kollegiales und dynamisches Team, das gemeinsam an spannenden Projekten arbeitet und sich gegenseitig unterstützt.
• Eine jährliche Zuzahlung zur betrieblichen Altersvorsorge sowie eine private Unfallversicherung.
• Firmenevents, wie Jahresauftaktfeier, Kochevents, Oktoberfest usw. die das Teamgefühl stärken und für unvergessliche Momente sorgen.
• Wir sind stolz darauf, als "familienfreundliches Unternehmen" ausgezeichnet worden zu sein und unterstützen unsere Mitarbeitenden in verschiedenen Lebenssituationen wie z.B. durch unser Family Office.
• Workation - arbeite aus dem EU Ausland. Sonne genießen und trotzdem mit dem Team verbunden bleiben.
• Vielfältige Zusatzleistungen on top, wie Deutschland Ticket, Urban Sports Fitnessstudio Mitgliedschaft, Edenred Wertkarte, Corporate Benefits, Job Rad, Gaming Room und vieles mehr.

Über uns

Steadforce kreiert ganzheitliche, skalierbare und unternehmenstaugliche digitale Plattformen, um den größten Nutzen aus den Kundendaten zu ziehen. Mit über 100 Expertinnen und Experten lösen wir die komplexesten Herausforderungen. Steadforce realisiert alle Kundenvisionen auf hohem fachlichen Niveau. Wir arbeiten methodisch, mit Liebe zum Detail und großer Begeisterung für alles, was wir tun. Wir begleiten unsere Kunden durch ihre Data Value Chain, die Folgendes umfasst: Datenbedarf identifizieren und vorhandene Daten überprüfen, Daten, Dienste und Geräte in Echtzeit verbinden, Daten analysieren, Vorhersagen treffen, datengestützt entscheiden, Automatisierung von Workflows, Anwendungen und Prozessen. Von Co-Creation über Dev und Ops bis hin zu Evolve ermöglicht unser holistisches Leistungsportfolio kontinuierliche Innovationen, durchgehendes Monitoring, schnelle Modernisierung und erfolgreiche Zusammenarbeit, bis die Geschäftsziele erreicht sind. Wir schaffen perfekt angepasste Lösungen für unsere Kunden. Namhafte Unternehmen profitieren von unserem Know-how.