Auf einen Blick
- Aufgaben: Entwickle herausfordernde Aufgaben zur Bewertung von KI-Coding-Agenten in realistischen Umgebungen.
- Unternehmen: Mindrift verbindet Spezialisten mit spannenden AI-Projekten führender Tech-Unternehmen.
- Vorteile: Bis zu 50 $/Stunde, flexible Arbeitszeiten und projektbasierte Mitarbeit.
- Weitere Informationen: Spannende Herausforderungen und die Möglichkeit, an der Spitze der Technologie zu arbeiten.
- Warum dieser Job: Gestalte die Zukunft der KI und teste innovative Lösungen in einem dynamischen Umfeld.
- Qualifikationen: Mindestens 5 Jahre Erfahrung in der Softwareentwicklung, insbesondere mit Python und Tests.
Das prognostizierte Gehalt liegt zwischen 50 - 50 € pro Stunde.
Bitte reichen Sie Ihren Lebenslauf in Englisch ein und geben Sie Ihr Englischniveau an.
Mindrift verbindet Spezialisten mit projektbasierten KI-Möglichkeiten für führende Technologieunternehmen, die sich auf das Testen, Bewerten und Verbessern von KI-Systemen konzentrieren. Die Teilnahme erfolgt projektbasiert, nicht als feste Anstellung.
Was diese Gelegenheit beinhaltet:
- Wir bauen einen Datensatz auf, um KI-Coding-Agenten zu bewerten - wie gut ein Modell reale Entwickleraufgaben bewältigt.
- Sie erstellen herausfordernde Aufgaben und Bewertungskriterien innerhalb realistischer simulierter Umgebungen:
- Erstellen Sie realistische Entwicklerumgebungen - ein virtuelles Unternehmen mit Codebasis, Infrastruktur und Kontext (Tickets, Dokumente, Gespräche), das eine glaubwürdige Entwicklungsgeschichte bildet.
- Gestalten Sie Aufgaben aus den Zwischenzuständen dieser Umgebungen - formulieren Sie den Prompt, definieren Sie, was „gelöst“ bedeutet, und stellen Sie sicher, dass die Aufgabe von einem KI-Agenten lösbar ist.
- Schreiben Sie Tests, die die Lösungen des Agenten überprüfen - akzeptieren Sie alle gültigen Ansätze und lehnen Sie falsche ab, weder zu streng noch zu nachsichtig.
- Iterieren Sie über Aufgaben und Tests basierend auf QA-Feedback - überprüfen Sie die Lösungen des Agenten, analysieren Sie Fehler und verfeinern Sie, bis die Bewertung fair und robust ist.
Was dies NICHT ist:
- Keine Datenkennzeichnung
- Keine Prompt-Engineering
- Kein Schreiben von Code von Grund auf - der Agent schreibt den meisten Code; Sie leiten an und bewerten.
Was wir suchen:
- 5+ Jahre Erfahrung in der Softwareentwicklung
- Kernstack: Python (FastAPI), JavaScript/TypeScript (React), Docker, Postgres, Kafka, Redis
- Erfahrung im Schreiben von Tests (funktional, Integration)
- Englischkenntnisse - B2+
Warum das schwierig ist:
Grenzmodelle sind bereits gut im Programmieren. Eine Aufgabe zu schaffen, die die besten Modelle wirklich herausfordert, ist nicht trivial. Sie müssen tief verstehen, wo Modelle scheitern und welche Szenarien den Unterschied zwischen einer guten und einer schlechten Lösung aufzeigen. Aufgaben haben viele gültige Lösungen - Tests zu schreiben, die alle korrekten Lösungen akzeptieren und falsche ablehnen, ist schwieriger als es klingt.
Wie es funktioniert:
- Bewerben → Qualifikation(en) bestehen → Projekt beitreten → Aufgaben abschließen → Bezahlt werden
Vergütung: Bis zu 50 $/Stunde, abhängig von Niveau und Tempo. Aufgaben werden auf etwa 20 Stunden geschätzt; Sie legen Ihren eigenen Zeitplan fest.
AI Evaluation Engineer (Python, QA or Security) Arbeitgeber: Mindrift
Mindrift ist ein hervorragender Arbeitgeber, der Fachleuten die Möglichkeit bietet, an spannenden, projektbasierten KI-Möglichkeiten für führende Technologieunternehmen zu arbeiten. Mit einem flexiblen Arbeitsumfeld, das auf Teilzeitprojekten basiert, fördert Mindrift eine Kultur des kontinuierlichen Lernens und der beruflichen Weiterentwicklung, während es gleichzeitig wettbewerbsfähige Vergütungen von bis zu 50 $ pro Stunde bietet. Die Zusammenarbeit mit internationalen Projekten und die Anwendung modernster Technologien machen diese Rolle besonders attraktiv für Statistiker mit Python-Kenntnissen.
StudySmarter Expertenrat🤫
Wir sind der Meinung, dass du so AI Evaluation Engineer (Python, QA or Security) erhalten könntest
✨Engagier dich in Entwickler-Communities!
Lass uns mal ehrlich sein: In der Software-Entwicklung sind Netzwerke Gold wert! Tummel dich in GitHub-Projekten, nehme an lokalen Meetups oder Hackathons teil und vernetze dich mit anderen Entwicklern. So steigerst du nicht nur deine Sichtbarkeit, sondern lernst auch die neuesten Trends und Technologien kennen.
✨Zeig deine Fähigkeiten!
Erstelle ein Portfolio, das deine besten Projekte und Code-Examples zeigt. Nichts überzeugt mehr als ein praktischer Beweis deiner Skills. Das kann auch helfen, bei Mindrift anzuklopfen, wenn du dich auf die Stelle als AI Evaluation Engineer (Python, QA or Security) bewirbst – so wissen sie gleich, was sie von dir erwarten können!
✨Nutze Jobplattformen speziell für Tech-Jobs!
Plattformen wie Stack Overflow Jobs oder AngelsList sind perfekte Orte, um Vollzeitstellen in der Software-Entwicklung zu finden. Hier sind viele tolle Unternehmen auf der Suche nach Talenten wie uns, also schau regelmäßig vorbei und bewirb dich direkt über die Website.
✨Such dir Mentoren und Feedback!
Hol dir Feedback von erfahrenen Entwicklern, die dir Tipps geben können, was Recruiter wirklich suchen. Ob über LinkedIn oder persönliche Kontakte: Menschen, die sich in der Branche auskennen, können enorm wertvoll sein, um dir zu helfen, dich optimal auf deine Bewerbung bei Mindrift vorzubereiten!
Wir glauben, dass du diese Fähigkeiten brauchst, um AI Evaluation Engineer (Python, QA or Security) mit Bravour zu bestehen
Einige Tipps für deine Bewerbung 🫡
Highlights deiner Coding-Skills:In der Software-Entwicklung kommt es auf konkrete Fähigkeiten an. Vergiss nicht, relevante Programmiersprachen und Frameworks in deinen Lebenslauf aufzunehmen. Zeig uns, was du kannst – vielleicht mit einem Link zu deinem GitHub-Profil oder einer Übersicht deiner Side Projects, die deine Programmierkenntnisse illustrieren.
Dokumentation deiner Erfolge:Gerade bei einer Vollzeitstelle in der Software-Entwicklung sind konkrete Ergebnisse Gold wert. Nenn uns Zahlen und Ergebnisse aus deinen vorherigen Projekten. Hast du den Code optimiert oder Systemfehler behoben? Solche Erfolge zeigen, dass du die Sprache der Entwickler sprichst und einen echten Mehrwert bringst.
Attraktive Projektbeschreibungen:Wenn du an Projekten gearbeitet hast, die hervorstechen, beschreibe sie ausführlich in deinem Lebenslauf. Was war das Problem, das du gelöst hast? Welche Technologien hast du eingesetzt? Das gibt uns einen klaren Einblick in deine Herangehensweise und Problemlösungsfähigkeiten.
Motivation zeigen:In deinem Anschreiben solltest du deine Motivation für die Stelle im Bereich Software-Entwicklung bei Mindrift klar herausstellen. Warum sprichst gerade du die Anforderungen für diese Vollzeitrolle an? Mach deutlich, was dich an der Arbeit bei uns reizt und wie du über das rein Technische hinaus wachsen möchtest.
Wie man sich auf ein Vorstellungsgespräch bei Mindrift vorbereitet
✨Technische Vorbereitung auf die Coding-Challenges
In der Software-Entwicklung sind technische Fragen oft ein zentraler Teil des Interviews. Macht euch mit Plattformen wie LeetCode oder HackerRank vertraut, um eure Problemlösungsfähigkeiten zu trainieren. Zeigt im Interview viel Selbstbewusstsein beim Erklären eurer Ansätze!
✨Das eigene Portfolio im besten Licht präsentieren
Stellt sicher, dass ihr ein aussagekräftiges Portfolio habt, das einige eurer besten Projekte zeigt. Seid bereit, darüber zu sprechen, was eure Rolle war, welche Technologien ihr verwendet habt und welche Herausforderungen es gab. Das gibt den Interviewern einen Einblick in eure praktische Erfahrung.
✨Teamfähigkeit und Kommunikation betonen
In einer Vollzeit-Position wird Kommunikation im Team sehr wichtig sein. Seid bereit, Beispiele aus der Vergangenheit zu teilen, in denen ihr effektiv im Team gearbeitet habt. Dies zeigt, dass ihr nicht nur technische Fähigkeiten habt, sondern auch gut ins Team passt.
✨Vorbereitung auf Fragen zur Software-Architektur
Bereitet euch darauf vor, Fragen zur Software-Architektur zu beantworten. Themen wie RESTful APIs, Microservices und Cloud-Architekturen können Teil eures Interviews sein. Zeigt euer Verständnis durch Diskussionen und Beispiele aus eurer bisherigen Arbeit oder Projekte.
