Lead Data Engineer - Data Migration & Lakehouse

Sie gedeihen darin, jahrzehntelange komplexe Altsysteme in eine saubere, moderne Datenarchitektur zu verwandeln. Sie fühlen sich wohl dabei, sich durch undokumentierte Mainframes, verworrene Schemata und mehrdeutige Spezifikationen zu navigieren – und wissen, wie man dieses Chaos in einen klaren technischen Weg umsetzt. Wenn Sie es lieben, komplexe Migrationen von Anfang bis Ende zu leiten, Vertrauen bei den Stakeholdern durch Klarheit und Ehrlichkeit aufzubauen und zu gestalten, wie Daten vom Erbe in die Lakehouse-Ära übergehen – dann ist dies für Sie.

Ihre Aufgaben

• Migrationsverantwortung: Leiten Sie großangelegte Migrationsprojekte von Altsystemen (von SQL über ERP bis hin zu Mainframes) in moderne Cloud-/Lakehouse-Ziele und übernehmen Sie die volle technische Verantwortung.
• Databricks-Architektur: Entwerfen und implementieren Sie robuste Pipelines mit Spark, Delta Lake, Unity Catalog, Lakeflow Declarative Pipelines und Databricks Asset Bundles für CI/CD-ähnliche Bereitstellungen.
• Datenmodellierung & -abgleich: Übernehmen Sie die Datenmodellierung, das Schema-Mapping und den Abgleich über heterogene Systeme hinweg und lösen Sie strukturelle Unstimmigkeiten eigenständig.
• Führungsrolle bei Entdeckung & Bewertung: Überprüfen von Quelldokumentationen, Interviewen von Fachexperten, Erstellen von Lückenanalysen und Übersetzen von mehrdeutigen oder veralteten Spezifikationen in konkrete technische Anforderungen.
• Datenqualität & Validierung: Etablieren Sie Datenqualitätsrahmen und automatisierte Validierungen als Teamstandards.
• Stakeholder-Kommunikation: Risiken proaktiv aufdecken – Dokumentationslücken, strukturelle Unstimmigkeiten – klar und frühzeitig an nicht-technische Stakeholder kommunizieren und SQUER selbstbewusst vertreten.

Ihre Qualifikationen

• Migrationsnachweis: 5+ Jahre Erfahrung in der Datenverarbeitung, mit mehreren großangelegten Altsystem-zu-Cloud/Lakehouse-Migrationen, die unabhängig geleitet wurden.
• Databricks-Tiefe: Praktische Beherrschung des Databricks-Ökosystems – Spark, Delta Lake, Unity Catalog, Lakeflow Declarative Pipelines und Asset Bundles für CI/CD-ähnliche Bereitstellungen.
• Datenmodellierung & -abgleich: Starke Kenntnisse in der Datenmodellierung und im Schema-Mapping über heterogene Systeme hinweg, von Mainframes bis zu Altsystem-ERPs.
• Entdeckungserfahrung: Erfahrung in den Phasen der Entdeckung/Bewertung von Anfang bis Ende – Interviewen von Fachexperten, Identifizieren von Lücken zwischen Altsystemen und Zielarchitektur, Umwandeln von Mehrdeutigkeiten in konkrete Anforderungen.
• Datenqualitätsrigor: Praktische Erfahrung mit Datenqualitätsrahmen und automatisierten Validierungen (z.B. Great Expectations, dbt-Tests, benutzerdefinierte Abgleichwerkzeuge).
• Kommunikation & Risikoverantwortung: Fähigkeit, komplexe Themen aufzuschlüsseln und Risiken frühzeitig und klar sowohl an technische als auch an nicht-technische Stakeholder zu kommunizieren.
• KI-unterstützte Workflows: Komfort im Umgang mit KI/LLM-unterstützten Werkzeugen im Kontext von Datenpipelines.

Nice-to-Haves

• Erfahrung mit der Archäologie von Altsystemen (undokumentierte COBOL/Mainframe-Systeme, EDI, proprietäre ERPs)
• Einblick in agentische KI
• Metadatenmanagement oder Datenkatalogwerkzeuge über Unity Catalog hinaus
• Erfahrung im Aufbau oder in der Bewertung von LLM-basierten Mapping-/Matching-Tools (Schema-Matching, Entitätsauflösung)

Ihre Vorteile

• Eigentum & Verantwortung: Bei SQUER glauben wir daran, unser Team zu ermächtigen. In unseren flachen Hierarchien zählen Ihre Ideen und Handlungen mehr als Titel. Übernehmen Sie die Verantwortung, hinterlassen Sie einen Eindruck und wachsen Sie mit uns.
• Lernen & Wachsen: Nutzen Sie ein jährliches Schulungsbudget von 5.000 €, um Ihre Fähigkeiten zu schärfen und profitieren Sie von unserer hauseigenen Leadership Academy. Werden Sie Teil unserer aktiven Tech-Community durch Meetups, Hackathons und Schulungen. Erhalten Sie bis zu 40 Stunden/Jahr zusätzliche Freizeit für Ihre persönliche Weiterbildung.
• Spannende Herausforderungen & echter Einfluss: Tauchen Sie in vielfältige Projekte ein, bei denen Ihre Arbeit wirklich einen Unterschied macht – für unsere Kunden und für SQUER.
• Flexibilität für Leistung: Profitieren Sie von hybriden Arbeitsoptionen, flexiblen Arbeitszeiten, Workations innerhalb der EU und zusätzlichen Urlaubstagen – damit Sie die Freiheit haben, Ihr Bestes zu geben.
• Maßgeschneiderte Werkzeuge für den Erfolg: Wählen Sie Ihre bevorzugte Hardware-Konfiguration und nutzen Sie unsere Suite von KI-Tools und Lizenzen (Anthropic, OpenAI und mehr), um Ihren Arbeitsstil zu unterstützen.
• Wir schätzen Sie: Über Vergünstigungen und Vorteile hinaus bieten wir ein wettbewerbsfähiges Jahresgehalt, um Ihre außergewöhnlichen Beiträge anzuerkennen.
• Teil einer florierenden Teamkultur: Bei SQUER stehen Zusammenarbeit und Verbindung im Mittelpunkt unseres Handelns. Durch offene Kommunikation, gemeinsame Erfolge und bedeutende Teamevents – einschließlich unseres jährlichen SQUER-Offsites – fördern wir eine Kultur, in der sich jeder geschätzt fühlt und inspiriert wird, gemeinsam zu wachsen.
• Ein perks-reiches Arbeitsumfeld: Arbeiten Sie in einem zentralen Büro mit einer geräumigen Terrasse und Grill, genießen Sie kostenloses Mittagessen im Büro, MyClubs-Sportmitgliedschaft und entweder ein kostenloses „Wiener Linien“-Ticket oder einen teilweisen Beitrag zum „Klimaticket“. Darüber hinaus profitieren Sie von kostenlosen Massagen, Empfehlungsprämien, Corporate Benefits und JobRad. Jährliche Mitarbeitergeschenke und ein monatliches Teamfrühstück erhöhen den Wert Ihrer Arbeitserfahrung. Wir glauben an transparente und faire Vergütung. Für diese Rolle liegt das jährliche Bruttogehalt zwischen 75.000 € und 95.000 € – die genaue Einstufung hängt vom Erfahrungsgrad ab, den wir gemeinsam im Prozess bewerten.