Auf einen Blick
- Aufgaben: Leite die Entwicklung von Evaluierungsrahmen für generative KI-Systeme und führe technische Bewertungen durch.
- Unternehmen: Resaro, ein globales Unternehmen für KI-Sicherung mit einem engagierten Team von Experten.
- Vorteile: Vollzeitstelle mit wettbewerbsfähigem Gehalt und der Möglichkeit, an bahnbrechenden Projekten zu arbeiten.
- Weitere Informationen: Dynamisches Umfeld mit Möglichkeiten zur beruflichen Weiterentwicklung und Mentoring.
- Warum dieser Job: Gestalte die Zukunft der KI mit und stelle sicher, dass sie sicher und vertrauenswürdig ist.
- Qualifikationen: Erfahrung in der Arbeit mit großen Sprachmodellen und tiefen Lerntechniken erforderlich.
Das prognostizierte Gehalt liegt zwischen 72000 - 84000 € pro Jahr.
Resaro wurde mit dem Glauben gegründet, dass KI die Welt auf unvorstellbare Weise verändern wird, aber jede neue Technologie benötigt Sicherheitsvorkehrungen, um voranzukommen. Wir suchen einen Senior LLM Scientist mit Erfahrung in tiefenlernenden Sprachmodellen, der in München ansässig ist und mit einem kategoriedefinierenden KI-Sicherheitsunternehmen zusammenarbeitet, das Unternehmen hilft, ihre KI-Systeme zu testen und zu prüfen.
Sie werden helfen, KI-Modelle zu bewerten und auf ihre Eignung und Sicherheit für den Einsatz zu testen. Wir schätzen starke technische Fähigkeiten und praktische Erfahrungen, und es wird Raum geben, herausfordernde Probleme zu lösen und modernste Technologien in Geschäftsanwendungen zu integrieren.
IHRE AUFGABEN
- Leitung des Designs, der Implementierung und Ausführung robuster Rahmenwerke zur Bewertung der Leistung generativer KI-Systeme, einschließlich Text- und multimodaler Modelle.
- Festlegung und Verfeinerung von Metriken und Benchmarks für die Modellqualität, einschließlich Ausgabe-Fidelität, Vielfalt, Kreativität und Bias-Erkennung.
- Durchführung technischer KI-Bewertungen, Benchmarking und „Red-Team“-Tests an großen Sprachmodellen.
- Zusammenarbeit mit Kunden und weniger erfahrenen Teammitgliedern zur Gestaltung maßgeschneiderter Bewertungsansätze.
- Zusammenarbeit mit dem Produktmanagementteam zur Entwicklung einer Suite technischer und analytischer KI-Bewertungsrahmen und -tools.
- Leitung des Designs und der Implementierung von Bewertungsrahmen für große Sprachmodelle (LLMs).
- Definition und Verfeinerung von Metriken zur Bewertung der Modellleistung.
- Leitung der Bemühungen um die Kuratierung und Verwaltung großer, hochwertiger Datensätze zur Bewertung von LLMs.
- Mentoring von Junior-Datenwissenschaftlern in Best Practices für LLM-Bewertungen.
- Aktualisierung über die neuesten Fortschritte in der Verarbeitung natürlicher Sprache (NLP) und LLM-Bewertungen.
IHRE FÄHIGKEITEN
- Denken aus ersten Prinzipien und die Bereitschaft, herausfordernde technische Probleme interdisziplinär anzugehen.
- Führung durch Beispiel, unabhängig davon, ob Sie Manager oder individueller Mitarbeiter sind.
- Kommunikation in offener, ehrlicher und respektvoller Weise.
- Blühen in einem schnelllebigen Umfeld.
- Umgang mit Unsicherheit und die Bereitschaft, zu erkunden, während Sie sich auf die Mission konzentrieren.
IHRE QUALIFIKATIONEN
- Umfangreiche Erfahrung als Datenwissenschaftler in der Ausbildung oder Bereitstellung von tiefenlernenden Sprachmodellen in realen Kontexten.
- Etwa 5-8 Jahre Berufserfahrung oder ein relevanter postgradualer Abschluss mit mehr als 2 Jahren Berufserfahrung in der Entwicklung und Bereitstellung von LLMs.
- Starke Erfahrung in der Bewertung von LLMs mit Metriken wie Perplexität, BLEU, ROUGE.
- Nachweisliche Erfahrung in der Verwaltung und Analyse großer, komplexer Sprachdatensätze.
- Ausgezeichnete schriftliche und mündliche Kommunikationsfähigkeiten.
- Solide Programmierkenntnisse in Python und Erfahrung im Aufbau automatisierter Pipelines für die kontinuierliche Modellbewertung.
- Leidenschaft und Interesse an angewandter Forschung zur sicheren und verantwortungsvollen Nutzung von KI.
WÜNSCHENSWERT
- Veröffentlichte Forschung im Bereich generative KI oder Modellauswertung.
- Praktische Erfahrung mit Tools und Methoden zur Erklärbarkeit von Modellen.
- Vertrautheit mit cloudbasierten Plattformen für skalierbare Modellbewertungen und Bereitstellungen.
ÜBER UNS
Resaro ist ein globales Unternehmen für KI-Sicherheit, das im Bereich KI-Tests und -Bewertungen Pionierarbeit leistet. Wir sind ein Team von KI-Experten, Ingenieuren und Datenwissenschaftlern. Unsere Mission ist es, einen vertrauenswürdigen KI-Markt zu gewährleisten. Resaro ist ein Arbeitgeber, der Chancengleichheit bietet. Wir respektieren jedes Individuum und unterstützen die vielfältigen Kulturen, Perspektiven, Fähigkeiten und Erfahrungen innerhalb unserer Teams.
Senior LLM Scientist (m/f/d) Arbeitgeber: Resaro
Resaro ist ein hervorragender Arbeitgeber, der seinen Mitarbeitern die Möglichkeit bietet, an der Spitze der KI-Technologie zu arbeiten und dabei einen bedeutenden Einfluss auf sicherheitskritische Systeme zu haben. Mit einem starken Fokus auf Teamarbeit und individueller Entwicklung fördert Resaro eine offene und integrative Arbeitskultur, in der Mitarbeiter ihre Fähigkeiten in einem dynamischen Umfeld weiterentwickeln können. Die Lage des Unternehmens ermöglicht es den Mitarbeitern, eng mit verschiedenen Branchen zusammenzuarbeiten, was zu spannenden Projekten und wertvollen Erfahrungen führt.
StudySmarter Expertenrat🤫
Wir sind der Meinung, dass du so Senior LLM Scientist (m/f/d) erhalten könntest
✨Wende dich an die richtigen Communities
Schau dir Online-Communities und Foren an, die sich um Data Science drehen, wie Kaggle oder GitHub. Engagiere dich dort aktiv, teile deine Projekte und lerne von anderen – das wird dir helfen, nicht nur einen Fuß in die Tür zu bekommen, sondern auch wertvolle Kontakte zu knüpfen.
✨Präsentiere deine Daten-Projekte
Baue ein Portfolio auf, das deine besten Projekte zeigt. Nutze Plattformen wie GitHub oder eine persönliche Webseite, um deine Arbeiten zu veröffentlichen. Arbeitgeber im Data Science-Bereich schauen oft direkt auf praktische Erfahrungen, also zeig, was du drauf hast!
✨Nimm an Meetups und Hackathons teil
Besuche lokale Data Science-Meetups oder nehme an Hackathons teil. Diese Veranstaltungen sind nicht nur super, um dein Wissen zu erweitern, sondern auch Gold wert für Networking. Du lernst Fachkollegen kennen und kannst auf Lockere Art und Weise Eventualjobs ergattern.
✨Direkte Bewerbungen über unsere Seite
Vergiss nicht, direkt auf unserer Website nach Stellenangeboten bei Resaro zu schauen. Hier kannst du dich auf offene Datenwissenschaftsstellen bewerben und zeigst damit direktes Interesse, das viele Arbeitgeber schätzen!
Wir glauben, dass du diese Fähigkeiten brauchst, um Senior LLM Scientist (m/f/d) mit Bravour zu bestehen
Einige Tipps für deine Bewerbung 🫡
Lass deine Daten sprechen!:In einem Bereich wie Data Science ist es entscheidend, dass du deine praktischen Fähigkeiten präsentierst. Wenn du an Projekten gearbeitet hast, die deine Analysefähigkeiten oder dein Wissen über Machine Learning demonstrieren, teile sie in deinem Lebenslauf oder füge einen Link zu deinem GitHub-Portfolio bei. Die Daten, die du analysiert hast, und die Tools, die du verwendest, sollten klar hervorgehoben werden.
Ergebnisse quantifizieren!:Unterstütze deine Erfahrung mit quantifizierbaren Ergebnissen. Zeige, wie du durch deine Analysen oder Modelle zur Entscheidungsfindung beigetragen hast oder wie deine Berechnungen den Rohdaten neue Erkenntnisse entlockt haben. Arbeitgeber in der Data Science sind oft an konkreten Verbesserungen und Effizienzsteigerungen interessiert!
Erläutere deine Lernbereitschaft!:Da es sich um eine Vollzeitstelle handelt, zeige in deinem Anschreiben, dass du bereit bist, zu lernen und dich weiterzuentwickeln. Sprich über deine Neugier für neue Technologien oder Methoden im Data Science Bereich. Vielleicht hast du auch Kurse besucht oder Zertifikate erworben, die deine Begeisterung zeigen!
Die richtige technische Sprache!:Achte darauf, dass deine Bewerbung alle relevanten technischen Begriffe enthält, die in der Data Science gebräuchlich sind. Nenne spezifische Programmier- und Analysetools wie Python, R oder SQL, die du beherrschst. Dies macht es für die Rekrutierer einfacher, schnell zu erkennen, dass du für die Rolle als Senior LLM Scientist (m/f/d) bei Resaro gut geeignet bist.
Wie man sich auf ein Vorstellungsgespräch bei Resaro vorbereitet
✨Bereite deine technischen Skills vor
In einem Vorstellungsgespräch für eine Data-Science-Position wird oft dein Wissen über Tools wie Python, R oder SQL getestet. Mach dich mit gängigen Algorithmen und deren Einsatzmöglichkeiten vertraut, denn technische Fragen können schnell kommen. Lass uns sicherstellen, dass du in diesen Bereichen glänzt!
✨Verschaffe dir einen Überblick über Projekte
Da es sich um eine Vollzeitstelle handelt, ist es wichtig, dass du konkrete Erfahrungen und Projekte vorweisen kannst. Wenn du bereits an Data-Science-Projekten gearbeitet hast, sei bereit, diese in der Tiefe zu erläutern und zu diskutieren, wie du die Probleme gelöst hast. Dein Portfolio kann hier einen echten Unterschied machen!
✨Vorbereitung auf case studies
In Data-Science-Interviews sind case studies und praktische Probleme häufig Teil des Gesprächs. Übe, wie du strukturiert und logisch an solche Aufgaben herangehst. Arbeitgeber möchten sehen, wie du Daten analysierst und Lösungen entwickelst – bring also deine analytischen Fähigkeiten mit!
✨Zeige deine Leidenschaft für Daten
Mehr denn je geht es bei einer Vollzeitstelle darum, dass du nicht nur die Skills hast, sondern auch wirklich für das Feld brennst. Teile Anekdoten oder Erfahrungen, die zeigen, wie du zur Datenwissenschaft gekommen bist und was dich fasziniert. Diese Begeisterung kann für Resaro entscheidend sein!
