Kafka DevOps Engineer

Verifone sucht einen Database Engineer, der unserem unglaublichen Platform Engineering Team beitritt. Dies ist eine Einstiegsposition mit einem Fokus auf Kafka, in der Sie praktisch mit den täglichen Abläufen, Zuverlässigkeit, Tuning, Automatisierung und Hochverfügbarkeit für Zahlungsgateway-Lösungen arbeiten werden, die jährlich Milliarden von Transaktionen vor Ort und in der AWS-Cloud verarbeiten. Sie haben die Möglichkeit, Ihre Erfahrung zu nutzen und andere Technologien wie Redis, MongoDB, PostgreSQL, MySQL, Snowflake usw. zu lernen.

Hauptverantwortlichkeiten

• Betreiben und Unterstützen von Kafka-Clustern in MSK und auf physischen/virtuellen Plattformen: Themenlebenszyklus, Partitionen/Replikation, Client-Konnektivität, ACLs, Quoten und Upgrades.
• Fehlerbehebung bei Producer/Consumer-Problemen (Verzögerung, Neuausbalancierung, Durchsatz, Serialisierung, Wiederholungen, Reihenfolge).
• Verwalten des Kafka Connect-Ökosystems, Debezium, KSQL, Schema-Registry.
• Hochverfügbarkeit, Replikation, Backup- und Wiederherstellungsstrategien.
• Kafka-Version-Upgrades in Entwicklungs- und Produktionsumgebungen mit minimaler oder keiner Anwendungsdowntime.
• Unterstützung von Schema-/Vertragsmustern (z. B. Konzepte der Schema-Registry, Kompatibilitätserwartungen, Versionierung).
• Zusammenarbeit mit Ingenieurteams, um die Anforderungen zu verstehen und sie zu Best Practices zu führen sowie die Abfragen zu optimieren, um eine bessere Leistung zu erzielen.
• Überwachung der Cluster-Gesundheit und -Leistung; Tuning für Durchsatz/Latenz und Kapazitätsmanagement.
• Hilfe bei der Vorfallreaktion und Nachbesprechungen: Ursachenanalyse, Präventionsmaßnahmen implementieren.
• Unterstützung und Verbesserung des zentralen Loggings und der Suche für operationale Fehlersuche und Vorfallreaktion mit dem ELK-Stack (Elasticsearch, Logstash, Kibana).
• Automatisierung für Bereitstellung, Konfiguration und routinemäßige Wartung erstellen (IaC und Skripting).
• Implementierung und Verbesserung von Überwachungs-/Alarmierungs- und Dashboards (SLIs/SLOs).
• Teilnahme an der Rufbereitschaft (mit Eskalation und Mentoring) und Unterstützung von Produktionssystemen.
• Dokumentation von Systemen und Betriebsverfahren, damit andere das, was Sie aufgebaut haben, ausführen können.

Erforderliche Qualifikationen/Fähigkeiten

• Mindestens 2 Jahre praktische Erfahrung in der Unterstützung von Kafka in einer großangelegten Produktionsumgebung.
• Konzepte von Kafka Producer/Consumer-Microservices und Kafka verteilter Architektur.
• Solide Linux-Grundlagen: Netzwerkgrundlagen, Protokolle, Systemfehlerbehebung, Prozess/Speicher, Festplatte.
• Komfort mit Skripting und Automatisierung (z. B. Python, Bash).
• Infrastructure-as-Code (Terraform bevorzugt) und CI/CD-Vertrautheit.
• Vertrautheit mit Beobachtungswerkzeugen (Metriken/Protokolle/Tracing-Konzepte) und Praktiken zur Vorfallreaktion.
• Grundlegendes Verständnis der Trade-offs verteilter Systeme (Verfügbarkeit, Konsistenz, Partitionen, Rückdruck).
• Starke Kommunikations- und Präsentationsfähigkeiten mit Schwerpunkt auf exekutiver Kommunikation.
• Flexibilität hinsichtlich Arbeitszeiten; Rufbereitschaft und Wochenenden.

Bevorzugte Fähigkeiten (nicht zwingend)

• Betreiben von Redis-Bereitstellungen für Caching, ephemerale Zustände, Warteschlangen/Streams und Ratenbegrenzungsanwendungen.
• Erfahrung mit relationalen Datenbanken: PostgreSQL und/oder MySQL (Grundlagen der Indizierung, Vacuum/Analyse, Abfragepläne, Grundlagen der Replikation).
• Betriebliche Vertrautheit mit MongoDB (Replica-Sets, Wahlen, Grundlagen des Oplogs, Backup/Wiederherstellung).
• Fehlerbehebung bei Client-Verhalten, Wachstum des Schlüsselraums, Hot Keys und Leistungsrückgängen.
• Verbesserung von Zuverlässigkeitsmustern: Backups/Snapshots (wo zutreffend), Bereitschaft zur Fehlertoleranz und Handbücher.
• Erfahrung mit PCI (Payment Card Industry Data Security)-Standards.
• Einblick in Datenanalytik, Datenverarbeitung, ETL, Data Lake (Batch vs. Streaming, Dateiformate wie Parquet, Tabellenformate wie Iceberg/Delta/Hudi, grundlegende Orchestrierung), AWS-Tools (Athena, Glue, Iceberg, Redshift usw.).
• On-Premise-Erfahrung (VMware/KVM, Speicher, Netzwerk) und/oder AWS-Erfahrung (EC2, VPC, IAM, MSK/ElastiCache, CloudWatch).
• Container/Kubernetes-Vertrautheit (Bereitstellungen, zustandsbehaftete Workloads, Speicherklassen) ist von Vorteil.
• Sicherheitsgrundlagen: geringste Privilegien, Geheimnisverwaltung, Verschlüsselung während der Übertragung/im Ruhezustand.

Unser Engagement

Verifone verpflichtet sich, ein vielfältiges Umfeld zu schaffen und ist stolz darauf, ein Arbeitgeber mit Chancengleichheit zu sein. Alle qualifizierten Bewerber erhalten unabhängig von Rasse, Hautfarbe, Religion, Geschlecht, Geschlechtsidentität oder -ausdruck, sexueller Orientierung, nationaler Herkunft, Genetik, Behinderung, Alter oder Veteranenstatus Berücksichtigung für eine Anstellung. Verifone verpflichtet sich auch zur Einhaltung aller fairen Beschäftigungspraktiken in Bezug auf Staatsbürgerschaft und Einwanderungsstatus.