Auf einen Blick
- Aufgaben: Lead the design of scalable ETL/ELT data pipelines using PySpark/Scala within Databricks.
- Unternehmen: Partnering with a leader in the Government Health sector focused on public health outcomes.
- Vorteile: Offers hybrid remote work and 482 visa sponsorship for the right candidate.
- Weitere Informationen: Work location is hybrid remote in Sydney, NSW 2000.
- Warum dieser Job: Be a technical leader in advanced Analytics and Research workloads in a vital sector.
- Qualifikationen: Requires 6+ years in Data Engineering, with 3+ years on the Databricks Platform.
Das prognostizierte Gehalt liegt zwischen 60000 - 80000 € pro Jahr.
Wir arbeiten mit einem wichtigen Akteur im Gesundheitssektor der Regierung zusammen, der sich der Optimierung der öffentlichen Gesundheitsresultate, der Ressourcenallokation und der Politikgestaltung durch eine moderne, cloud-native Datenplattform widmet. Für den richtigen Kandidaten mit den erforderlichen Fähigkeiten und Erfahrungen bieten wir gerne ein 482-Visum-Sponsoring an. Dieser Kunde benötigt einen Senior Databricks Developer, der als technischer Leiter für ihre fortschrittlichen Analyse- und Forschungsarbeiten fungiert.
Was Sie tun werden:
- Leiten Sie das Design und die Entwicklung von großangelegten, resilienten und leistungsfähigen ETL/ELT-Datenpipelines unter Verwendung von PySpark/Scala innerhalb von Databricks-Notebooks und -Jobs.
- Architektur und Verwaltung der Delta Lake-Umgebung, mit Fokus auf Datenaufnahme, Qualitätsdurchsetzung (unter Verwendung von Delta Live Tables oder ähnlichem) und Schemaevolution für komplexe öffentliche Gesundheitsdatensätze.
- Optimieren Sie Databricks-Cluster, Notebooks und Spark-Jobs hinsichtlich Kosten-Effizienz und Leistung, insbesondere bei Engpässen in hochvolumigen Batch- und Streaming-Workloads.
- Definieren und Durchsetzen von Daten-Governance-Praktiken innerhalb des Lakehouse, Nutzung des Unity Catalogs für zentrale Metadaten und Zugriffskontrolle, unter Einhaltung der staatlichen Standards.
- Eng mit Regierungsanalysten und Datenwissenschaftlern zusammenarbeiten, um analytische Modelle und Forschungsergebnisse in skalierbare, produktionsbereite Pipelines zu überführen.
- Fördern Sie CI/CD- und MLOps-Praktiken für Databricks-Notebooks und -Workflows, unter Verwendung von Tools wie Azure DevOps oder Jenkins.
- Mentor und Anleitung für Junior Engineers zu Databricks-Entwicklungsstandards, Spark-Optimierung und modernen Datenengineering-Praktiken.
Was Sie mitbringen:
- Über 6 Jahre progressive Berufserfahrung im Bereich Data Engineering, davon mindestens 3 Jahre, die sich auf die Entwicklung von Lösungen auf der Databricks-Plattform konzentrieren.
- Expertenkenntnisse in PySpark und/oder Scala für verteilte Datenverarbeitung.
- Erforderliche praktische Erfahrung mit der Delta Lake-Architektur, einschließlich DLT, Zeitreise und VACUUM-Operationen.
- Tiefes Verständnis der Cloud-Infrastruktur (Azure bevorzugt) und wie Databricks mit Cloud-Speicher (ADLS Gen2) und -Diensten integriert.
- Expertenkenntnisse in SQL und dimensionalen Modellierungsprinzipien.
- Nachgewiesene Erfahrung mit CI/CD, Infrastructure as Code (z.B. Terraform) und Databricks-Befehlszeilentools zur Automatisierung.
- Außergewöhnliche Kommunikations- und Problemlösungsfähigkeiten, mit der Fähigkeit, komplexe Anforderungen zu analysieren und resiliente Lösungen in einem stark regulierten Umfeld zu entwerfen.
Vergütung: $70,000.00 – $120,000.00 pro Jahr
Vorteile: Homeoffice
Arbeitsort: Hybrid remote in Sydney NSW 2000
Senior Databricks Developer Arbeitgeber: United States Digital Space LLC
Join a pivotal organization in the Government Health sector dedicated to optimizing public health. Enjoy benefits like hybrid remote work and 482 visa sponsorship while working in a team that values data-driven decision-making.
Kontaktdaten:
United States Digital Space LLC Recruiting-Team
StudySmarter Expertenrat🤫
Wir sind der Meinung, dass Sie so Senior Databricks Developer erhalten könnten
✨Wende dich an die richtigen Communities
Schau dir Online-Communities und Foren an, die sich um Data Science drehen, wie Kaggle oder GitHub. Engagiere dich dort aktiv, teile deine Projekte und lerne von anderen – das wird dir helfen, nicht nur einen Fuß in die Tür zu bekommen, sondern auch wertvolle Kontakte zu knüpfen.
✨Präsentiere deine Daten-Projekte
Baue ein Portfolio auf, das deine besten Projekte zeigt. Nutze Plattformen wie GitHub oder eine persönliche Webseite, um deine Arbeiten zu veröffentlichen. Arbeitgeber im Data Science-Bereich schauen oft direkt auf praktische Erfahrungen, also zeig, was du drauf hast!
✨Nimm an Meetups und Hackathons teil
Besuche lokale Data Science-Meetups oder nehme an Hackathons teil. Diese Veranstaltungen sind nicht nur super, um dein Wissen zu erweitern, sondern auch Gold wert für Networking. Du lernst Fachkollegen kennen und kannst auf Lockere Art und Weise Eventualjobs ergattern.
✨Direkte Bewerbungen über unsere Seite
Vergiss nicht, direkt auf unserer Website nach Stellenangeboten bei United States Digital Space LLC zu schauen. Hier kannst du dich auf offene Datenwissenschaftsstellen bewerben und zeigst damit direktes Interesse, das viele Arbeitgeber schätzen!
Wir glauben, dass du diese Fähigkeiten brauchst, um Senior Databricks Developer mit Bravour zu bestehen
Einige Tipps für deine Bewerbung 🫡
Lass deine Daten sprechen!:In einem Bereich wie Data Science ist es entscheidend, dass du deine praktischen Fähigkeiten präsentierst. Wenn du an Projekten gearbeitet hast, die deine Analysefähigkeiten oder dein Wissen über Machine Learning demonstrieren, teile sie in deinem Lebenslauf oder füge einen Link zu deinem GitHub-Portfolio bei. Die Daten, die du analysiert hast, und die Tools, die du verwendest, sollten klar hervorgehoben werden.
Ergebnisse quantifizieren!:Unterstütze deine Erfahrung mit quantifizierbaren Ergebnissen. Zeige, wie du durch deine Analysen oder Modelle zur Entscheidungsfindung beigetragen hast oder wie deine Berechnungen den Rohdaten neue Erkenntnisse entlockt haben. Arbeitgeber in der Data Science sind oft an konkreten Verbesserungen und Effizienzsteigerungen interessiert!
Erläutere deine Lernbereitschaft!:Da es sich um eine Vollzeitstelle handelt, zeige in deinem Anschreiben, dass du bereit bist, zu lernen und dich weiterzuentwickeln. Sprich über deine Neugier für neue Technologien oder Methoden im Data Science Bereich. Vielleicht hast du auch Kurse besucht oder Zertifikate erworben, die deine Begeisterung zeigen!
Die richtige technische Sprache!:Achte darauf, dass deine Bewerbung alle relevanten technischen Begriffe enthält, die in der Data Science gebräuchlich sind. Nenne spezifische Programmier- und Analysetools wie Python, R oder SQL, die du beherrschst. Dies macht es für die Rekrutierer einfacher, schnell zu erkennen, dass du für die Rolle als Senior Databricks Developer bei United States Digital Space LLC gut geeignet bist.
Wie man sich auf ein Vorstellungsgespräch bei United States Digital Space LLC vorbereitet
✨Bereite deine technischen Skills vor
In einem Vorstellungsgespräch für eine Data-Science-Position wird oft dein Wissen über Tools wie Python, R oder SQL getestet. Mach dich mit gängigen Algorithmen und deren Einsatzmöglichkeiten vertraut, denn technische Fragen können schnell kommen. Lass uns sicherstellen, dass du in diesen Bereichen glänzt!
✨Verschaffe dir einen Überblick über Projekte
Da es sich um eine Vollzeitstelle handelt, ist es wichtig, dass du konkrete Erfahrungen und Projekte vorweisen kannst. Wenn du bereits an Data-Science-Projekten gearbeitet hast, sei bereit, diese in der Tiefe zu erläutern und zu diskutieren, wie du die Probleme gelöst hast. Dein Portfolio kann hier einen echten Unterschied machen!
✨Vorbereitung auf case studies
In Data-Science-Interviews sind case studies und praktische Probleme häufig Teil des Gesprächs. Übe, wie du strukturiert und logisch an solche Aufgaben herangehst. Arbeitgeber möchten sehen, wie du Daten analysierst und Lösungen entwickelst – bring also deine analytischen Fähigkeiten mit!
✨Zeige deine Leidenschaft für Daten
Mehr denn je geht es bei einer Vollzeitstelle darum, dass du nicht nur die Skills hast, sondern auch wirklich für das Feld brennst. Teile Anekdoten oder Erfahrungen, die zeigen, wie du zur Datenwissenschaft gekommen bist und was dich fasziniert. Diese Begeisterung kann für United States Digital Space LLC entscheidend sein!
