Data Engineer (f/m/x)

Als führender Experte für den Aufbau digitaler Plattformen und Innovationen im Kundenservice gestaltet NETCONOMY die digitale Führung seiner Kunden. Wir helfen Marken, flexible und skalierbare digitale Plattformen mit erstklassigen Technologien von SAP, Google Cloud und Microsoft Azure aufzubauen. NETCONOMY hat 20 Jahre Erfahrung und beschäftigt fast 500 Fachleute in ganz Europa. Durch die Einführung und Förderung von Innovationsinitiativen im Bereich Kundenerfahrung unterstützen wir unsere Kunden auf dem Weg zur Erweiterung ihres Kerngeschäfts in der digitalen Welt.

In den letzten 25 Jahren ist NETCONOMY von einem Startup zu einem Team von 500 Personen an 10 europäischen Standorten gewachsen. Wir glauben an die Kraft agiler und funktionsübergreifender Zusammenarbeit, die Menschen aus verschiedenen Hintergründen zusammenbringt, um herausragende digitale Lösungen zu entwickeln.

IHRE AUFGABEN

• Als Data Engineer spielen Sie eine Schlüsselrolle beim Aufbau moderner, skalierbarer und leistungsstarker Datenlösungen auf der Google Cloud Platform (GCP).
• Sie sind Teil unseres wachsenden Data & AI-Teams und entwerfen sowie implementieren Datenarchitekturen, die unseren Kunden helfen, das volle Potenzial ihrer Daten auszuschöpfen.

Wesentliche Verantwortlichkeiten:

• Effiziente und skalierbare ETL/ELT-Prozesse zum Laden, Transformieren und Laden von Daten aus verschiedenen strukturierten und unstrukturierten Quellen (Datenbanken, APIs, Streaming-Plattformen) in BigQuery und Cloud Storage aufbauen.
• Datenaufnahme und Echtzeitverarbeitung mit Dataflow (Apache Beam) und Pub/Sub für Batch- und Streaming-Workflows implementieren.
• SQL-Transformations-Workflows mit Dataform entwickeln, einschließlich Versionskontrolle, Tests und automatisierter Planung mit integrierten Qualitätsprüfungen.
• Effiziente, kostensparende BigQuery-Abfragen mit geeigneten Partitionierungs-, Cluster- und Denormalisierungsstrategien erstellen.
• Komplexe Workflows mit Cloud Composer (Apache Airflow) und Cloud Functions für ereignisgesteuerte Datenverarbeitung orchestrieren.
• Zentralisierte Datenverwaltung und Metadatenmanagement mit Dataplex implementieren, einschließlich automatisierter Katalogisierung und Nachverfolgung der Herkunft.
• Datenpipelines hinsichtlich Leistung, Skalierbarkeit und Kosten mit Cloud Monitoring und Cloud Logging überwachen und optimieren.
• Mit Datenwissenschaftlern und Analysten zusammenarbeiten, um Datenanforderungen zu verstehen und umsetzbare Erkenntnisse zu liefern.
• Aktuell bleiben bei GCP-Entwicklungen in den Datenservices, BigQuery-Funktionen und Best Practices im Bereich Datenengineering.

Ihre Fähigkeiten

Erforderliche Fähigkeiten:

• 3+ Jahre praktische Erfahrung als Data Engineer mit nachgewiesener Expertise in Google Cloud Platform (GCP).
• Starke Erfahrung mit BigQuery (SQL, Partitionierung, Clustering, Optimierung) und Dataflow (Apache Beam).
• Starke Programmierkenntnisse in Python mit Erfahrung in Datenmanipulationsbibliotheken (PySpark, pandas).
• Expertenniveau in SQL für komplexe Transformationen, Optimierung und Analyse.
• Kenntnisse in Dataform für modulare SQL-basierte Datenumwandlungen und Datenpipeline-Management.
• Solides Verständnis der Prinzipien des Data Warehousing, ETL/ELT-Prozesse, dimensionales Modellieren und Datenverwaltung.
• Erfahrung in der Integration von Daten aus verschiedenen APIs und Streaming-Systemen (Pub/Sub).
• Cloud Composer-Erfahrung für Workflow-Orchestrierung.
• Ausgezeichnete Kommunikations- und Kollaborationsfähigkeiten in Englisch (mindestens B2-Niveau).
• Fähigkeit, selbstständig und im Rahmen eines agilen Teams zu arbeiten.

Wünschenswerte Fähigkeiten:

• Google Professional Data Engineer-Zertifizierung.
• Kenntnisse über BigLake für den einheitlichen Zugriff und die Verwaltung von strukturierten und unstrukturierten Daten.
• Erfahrung mit Dataplex zur Verwaltung von Metadaten, Herkunft und Datenverwaltung.
• Vertrautheit mit Infrastructure-as-Code (Terraform) zur Automatisierung der Bereitstellung von GCP-Ressourcen und CI/CD-Pipelines.
• Erfahrung mit Datenvisualisierungstools wie Looker, Looker Studio oder Power BI.
• Interesse an oder Erfahrung mit Machine-Learning-Workflows unter Verwendung von Vertex AI oder ähnlichen Plattformen.

UNSER ANGEBOT

• Flexible Arbeitsmodelle: Frühaufsteher oder Nachtmensch? Dank unserer flexiblen Arbeitsmodelle beginnen Sie Ihren Arbeitstag, wann und wo es Ihnen am besten passt. Darüber hinaus können Sie mit unserer hybriden Arbeitsoption wählen, ob Sie lieber mehr im Büro oder von zu Hause aus arbeiten möchten.
• Karriereentwicklung und Einarbeitung: Beginnen Sie Ihre Reise bei NETCONOMY mit einer strukturierten Einarbeitungs- und Mentoring-Phase und setzen Sie diese mit individuellen Schulungsmöglichkeiten fort. Unser People Enablement-Team unterstützt Sie dabei, die beste Lösung für Sie zu finden!
• Unternehmensgipfel: Tauschen Sie berufliche und persönliche Erfahrungen auf unserer jährlichen internen Konferenz aus! Ein Highlight unseres Unternehmensgipfels ist die lebendige Networking-Umgebung, die er schafft.
• Soziale Veranstaltungen: Treffen Sie unsere Kollegen und knüpfen Sie neue Kontakte bei unseren sozialen Veranstaltungen wie Pizzaabenden, Sportaktivitäten, Weihnachtsfeiern oder Jubiläumsfeiern.
• Snacks und Wohlbefinden: Steigern Sie Ihre Produktivität und Ihren Gaumen mit unserem monatlichen Essenszuschuss und Rabatten in Partnerrestaurants.
• Mobilitätsunterstützung: Wählen Sie umweltfreundliche Verkehrsmittel! Da wir unsere Verantwortung für die Umwelt ernst nehmen, unterstützen wir Ihre klimafreundlichen Transportkosten.

Das tatsächliche Gehalt hängt von Ihren Qualifikationen und Erfahrungen ab. Uns ist auch wichtig, unseren Mitarbeitern ein intern vergleichbares Gehalt zu zahlen. Aus rechtlichen Gründen müssen wir das Mindestjahresgehalt für eine Vollzeitbeschäftigung gemäß dem aktuellen Kollektivvertrag IT bekannt geben, das für diese Position bei 55.356 € brutto/Jahr liegt.