Working Student (f/m/d) - AI-based Quality Evaluation for AI-Generated Code Changes (SAP HANA Cloud)

Wir helfen der Welt, besser zu laufen. Bei SAP ermöglichen wir es Ihnen, Ihr Bestes zu geben. Unsere Unternehmenskultur konzentriert sich auf Zusammenarbeit und eine gemeinsame Leidenschaft, um der Welt zu helfen, besser zu laufen. Wie? Wir konzentrieren uns jeden Tag darauf, die Grundlage für morgen zu schaffen und einen Arbeitsplatz zu schaffen, der Unterschiede schätzt, Flexibilität wertschätzt und auf unsere zielgerichtete und zukunftsorientierte Arbeit ausgerichtet ist. Wir bieten ein hochgradig kollaboratives, fürsorgliches Teamumfeld mit einem starken Fokus auf Lernen und Entwicklung, Anerkennung für Ihre individuellen Beiträge und eine Vielzahl von Vorteilen, aus denen Sie wählen können.

Was Sie aufbauen werden: Im täglichen Entwicklungsprozess überprüfen SAP HANA-Entwickler Codeänderungen, die von KI-Coding-Agenten generiert wurden. Diese Änderungen müssen hohe Qualitätsstandards erfüllen, bevor sie in den Produktionscode integriert werden können. Heute überprüfen wir, ob der von KI generierte Code deterministische Verifikationen (z. B. Linting, Tests) besteht, aber wir messen noch nicht, ob Änderungen andere Kriterien (z. B. Code-Konventionen) erfüllen. Dies kann zu einer geringeren Akzeptanz von KI-generierten Änderungen führen. In diesem Projekt entwerfen und führen Sie Experimente durch, um ein automatisiertes Qualitätsevaluierungssystem zu bewerten, das große Sprachmodelle und Techniken wie LLM-as-a-Judge verwendet, um KI-generierte Änderungen zu bewerten. Sie erstellen einen Ground-Truth-Datensatz aus echtem Entwickler-Feedback, entwerfen ein strukturiertes Bewertungsraster und benchmarken, wie gut ein LLM-Richter mit menschlichen Entscheidungen korreliert. Das Projekt wird in Python implementiert und nutzt moderne Coding-Agenten wie Cline und Claude Code, statistische Analysen und Experimentverfolgung mit MLflow.

Was Sie mitbringen: Erwartete Qualifikationen: Student der Informatik, Datenwissenschaft, Computerlinguistik, Mathematik oder eines verwandten Fachs an einer Hochschule. Erfahrung mit Programmierung, maschinellem Lernen und LLMs, nachgewiesen durch bestehende Projekte. Sicher im Englischen für die tägliche Kommunikation (B-Niveau). Deutsch (B-Niveau) ist von Vorteil. Gute Noten, die durch ein Transcript of Records (ToR) / Noten nachgewiesen werden.

Die Bewerbung muss enthalten: Ein Anschreiben, das Ihr Interesse ausdrückt; einen Lebenslauf, der Informationen über Ihre Programmiererfahrung bereitstellt; ein Transcript of Records (ToR), das die Noten aller Studiengänge/Abschlüsse enthält.

Wo Sie hingehören: Schließen Sie sich einem Team an, das Kreativität schätzt, Risikobereitschaft fördert und auf Ihre einzigartigen Ideen zählt. Unser Ziel ist es, eine hochmoderne agentische KI-Coding-Plattform für SAP HANA aufzubauen und zu pflegen. Ihre Bewerbungsunterlagen sollten ein Anschreiben, einen Lebenslauf in Tabellenform, Schulabschlüsse, eine Immatrikulationsbescheinigung, das aktuelle Transcript of Records der Universität, Kopien aller bereits erworbenen akademischen Abschlüsse und, falls verfügbar, Referenzen von früheren Arbeitgebern (einschließlich Praktika) enthalten. Bitte beschreiben Sie auch Ihre Erfahrungen und Fähigkeiten in Fremdsprachen sowie Computerprogrammen / Programmiersprachen.

Bringen Sie Ihr Bestes hervor: SAP-Innovationen helfen mehr als vierhunderttausend Kunden weltweit, effizienter zusammenzuarbeiten und Geschäftseinblicke effektiver zu nutzen. Ursprünglich bekannt für die Führung im Bereich Enterprise Resource Planning (ERP)-Software, hat sich SAP zu einem Marktführer in der End-to-End-Geschäftsanwendungssoftware und verwandten Dienstleistungen für Datenbanken, Analytik, intelligente Technologien und Erfahrungsmanagement entwickelt. Als Cloud-Unternehmen mit zweihundert Millionen Nutzern und mehr als einhunderttausend Mitarbeitern weltweit sind wir zielgerichtet und zukunftsorientiert, mit einer hochgradig kollaborativen Teamethik und einem Engagement für persönliche Entwicklung.

Wir gewinnen mit Inklusion: Die Kultur der Inklusion von SAP, der Fokus auf Gesundheit und Wohlbefinden sowie flexible Arbeitsmodelle tragen dazu bei, dass sich jeder – unabhängig von seinem Hintergrund – einbezogen fühlt und sein Bestes geben kann. Bei SAP glauben wir, dass wir durch die einzigartigen Fähigkeiten und Qualitäten, die jede Person in unser Unternehmen einbringt, stärker werden, und wir investieren in unsere Mitarbeiter, um Vertrauen zu schaffen und jedem zu helfen, sein volles Potenzial zu entfalten. Wir glauben letztendlich daran, alle Talente freizusetzen und eine bessere und gerechtere Welt zu schaffen. SAP ist stolz darauf, ein Arbeitsplatz mit Chancengleichheit zu sein und ein Arbeitgeber, der positive Maßnahmen ergreift. Wir setzen uns für die Werte der Chancengleichheit ein und bieten Barrierefreiheit für Bewerber mit körperlichen und/oder geistigen Behinderungen.