Databricks Solutions Architect

SMSI bietet Expertenmanagementberatung, Programm- und Projektmanagement sowie technische Beratungsdienste für Regierungs- und Privatkunden an. SMSI hat sich durch den Aufbau eines hervorragenden Rufs für kundenorientierte Leistungen und die Lieferung von Ergebnissen, die es den Kunden ermöglichen, Verpflichtungen und Meilensteine zu erfüllen, weiterentwickelt. SMSI ist ein Arbeitgeber, der Chancengleichheit bietet; alle qualifizierten Bewerber erhalten unabhängig von Rasse, Hautfarbe, Religion, Geschlecht, sexueller Orientierung, Geschlechtsidentität, nationaler Herkunft, Behinderung oder Status als geschützter Veteran Berücksichtigung für eine Anstellung.

SMSI LLC sucht einen Databricks Solutions Architect, um unseren Kunden, das Los Alamos National Laboratory (LANL), zu unterstützen. Diese Position wird größtenteils remote sein, mit gelegentlichen Reisen vor Ort in Los Alamos, NM, nach Bedarf. Das Los Alamos National Laboratory hat SAP für seine nächste Generation von Cloud-ERP-Lösungen ausgewählt. Parallel dazu wird eine zukünftige Datenstrategie benötigt, um neue Tools und Technologien zu nutzen, um das aktuelle betriebliche Datenspeicher zu modernisieren. Diese Arbeit spielt eine entscheidende Rolle bei der Unterstützung wichtiger institutioneller Initiativen wie der Ermöglichung von Echtzeitanalysen, KI/ML-Fähigkeiten und verbesserter Betriebseffizienz.

Diese Rolle wird entscheidend für die Transformation ihrer Legacy-Datenumgebung in eine moderne, cloud-native Architektur sein. In Zusammenarbeit mit institutionellen Wissensexperten und ERP-Implementierungsplanern und -integratoren werden Sie die Datenstrategie, Standards und Blaupausen für die Migration und Integration von hochvolumigen Betriebsdaten in eine neue Plattform definieren und dabei die Datenintegrität, Sicherheit und Zugänglichkeit im gesamten Unternehmen sicherstellen.

Jobanforderungen

• 5+ Jahre progressive Erfahrung in Datenarchitektur, Datenmodernisierung und cloudbasierten Datenlösungen.
• Beratung zur Databricks-Referenzarchitektur, die Lakeflow, Delta Lake, Unity Catalog Mosaic AI, Databricks SQL und Databricks Apps umfasst.
• Praktische Anleitung zum Design von Databricks-Full-Stack-Lösungen.
• Beratung zum Design von Datenbewegungen (z.B. Batch, Echtzeit-Streaming) und Zero-Copy-Mustern.
• Leitung von Plattformmigrationen von Legacy-SQL- und Dokumentenspeichern auf Databricks und verwandte Cloud-Datenplattformen.
• Empfehlung von Sicherheits-, Governance- und Compliance-as-Code: Unity Catalog ABAC, verwaltete Tags, Zeilenfilter/Spaltenmasken, Schlüsselverwaltung, Netzwerksicherheit und Compliance-Sicherheitsprofile.
• Beratung zum Design von segregierten/gestuften Datenpoolarchitekturen, die an die Datenklassifizierungspolitik der Organisation und an geltende regulatorische Anforderungen angepasst sind, einschließlich der Datenbewegung zwischen den Ebenen.
• Empfehlung von FinOps- und Leistungsstandards, Arbeitslast- und Kostenmanagement.
• Mentoring von Dateningenieuren, Analysten und KI/ML-Teams, Teilnahme an Architekturüberprüfungen und Beitrag zu Standards.
• Zusammenarbeit mit Informations- und Cybersicherheits- sowie anderen Teams nach Bedarf zur Einhaltung von Richtlinien und Standards.
• Bewertung neuer Databricks-Funktionen und Empfehlung von Adoptionsstrategien, einschließlich Endpunktintegrationen mit Dritten, während sie sich entwickeln.
• Ausgezeichnete mündliche und schriftliche Kommunikationsfähigkeiten.
• Der Kandidat muss in der Lage sein, mit vielen Teammitgliedern aus verschiedenen Disziplinen zusammenzuarbeiten.
• US-Staatsbürgerschaft ist erforderlich.

Bevorzugte Qualifikationen

• 7+ Jahre Erfahrung im Entwerfen, Bauen und Betreiben von Databricks-Workloads mit Medaillon-Schichtarchitektur.
• Praktische Erfahrung mit Delta Lake, Unity Catalog, Spark Structured Streaming, Lakeflow (oder DLT/Live Tables), Databricks SQL, MLflow und Mosaic AI Model Serving.
• Starke Erfahrung in der Cloud-Architektur, die die Plattform unterstützt (VPC/VNet, Sicherheit, S3/ADLS, KMS usw.).
• Nachweisliche Erfahrung in der Migration von Unternehmensdaten-Workloads von Legacy/on-premise-Datenlager/Lake zu Databricks.
• Erfahrung mit Produktions-Streaming und CDC.
• Tiefe Kenntnisse in Sicherheit und Governance: Unity Catalog-Richtlinien (ABAC), Klassifizierung, Verschlüsselung, Zugriffsprüfung, Compliance-to-Control-Übersetzung.
• Praktische Erfahrung im Entwerfen von mehrschichtigen Databricks-Architekturen, die durch Datenklassifizierungsanforderungen gesteuert werden.
• Starke Kenntnisse in Python und SQL, Spark, Notebooks.
• Ausgezeichnete mündliche und schriftliche Kommunikationsfähigkeiten.
• Aktive (oder kürzlich erhaltene) Q-Sicherheitsfreigabe ist von Vorteil, aber nicht erforderlich.

Wünschenswert

• Aktive Databricks-Zertifizierungen.
• Erfahrung mit GenAI und Agentensystemen auf Databricks.
• Delta Sharing und Databricks Clean Rooms für kontrollierten, regulierten Datenaustausch über organisatorische/zwischenebene/systemgrenzen.
• Vertrautheit mit Oracle EBS und SAP Unternehmensdaten.
• Erfahrung mit SAP BDC/DataSphere und Databricks-Integration zu SAP BDC, mit Zero-Copy-Mustern.
• Lakeflow Designer, Databricks Apps, Genie, Databricks OneCI/CD, Infrastructure-as-Code (z.B. Terraform) für Datenplattformen.
• Erfahrung im Entwerfen, Bauen und Unterstützen von BI-Reporting-Schichten.
• Datenqualitäts- und Daten-Governance-Erfahrung.
• Frühere Erfahrung in regulierten Branchen (z.B. Versorgungsunternehmen, Lebenswissenschaften, Regierungsdienste) und Kenntnisse verwandter Rahmenwerke (z.B. FERC/NERC, HIPAA, GxP, GDPR, FedRAMP, ITAR usw.).

Bildungsanforderungen

• Abschluss in Informatik, Ingenieurwesen, Informationssystemen oder einem verwandten Fachgebiet, vorzugsweise mit 12 Jahren Erfahrung. Eine gleichwertige Kombination aus Ausbildung und Erfahrung wird berücksichtigt.
• Zertifizierungen sind von Vorteil.