Remote AI Quality Analyst (German) - 72063

Basierend in San Francisco, Kalifornien, ist Turing der weltweit führende Forschungsbeschleuniger für fortschrittliche KI-Labore und ein vertrauenswürdiger Partner für globale Unternehmen, die fortschrittliche KI-Systeme implementieren. Turing unterstützt Kunden auf zwei Arten: erstens durch die Beschleunigung der Grenzforschung mit hochwertigen Daten, fortschrittlichen Trainingspipelines sowie erstklassigen KI-Forschern, die sich auf Codierung, Argumentation, MINT, Mehrsprachigkeit, Multimodalität und Agenten spezialisiert haben; und zweitens durch die Anwendung dieses Fachwissens, um Unternehmen zu helfen, KI von einem Konzeptnachweis in proprietäre Intelligenz zu transformieren, mit Systemen, die zuverlässig arbeiten, messbare Auswirkungen liefern und nachhaltige Ergebnisse auf der Gewinn- und Verlustrechnung erzielen.

Rollenübersicht

Als AI Quality Analyst werden Sie eine neue Personalisierungsfunktion für Gemini bewerten. Sie werden beurteilen, wie gut das Modell Informationen aus Ihren früheren Gemini-Gesprächen, Gmail, Google-Suche und YouTube-Aktivitäten nutzt, um Antworten relevanter und hilfreicher zu gestalten. Diese Rolle erfordert eine einzigartige Mischung aus Kreativität und analytischer Strenge. Sie werden aktiv Aufforderungen aus der Perspektive Ihrer eigenen persönlichen Erfahrungen entwerfen. Anschließend werden Sie Ihre analytischen Fähigkeiten nutzen, um die Qualität der personalisierten Antworten des Modells zu bewerten, wobei Sie Dimensionen wie Verankerung, Integration und Hilfsbereitschaft bewerten.

Wesentliche Qualifikationen

• Deutschkenntnisse: Fähigkeit, auf Deutsch mit einem hohen Maß an Kompetenz zu lesen und zu schreiben, da Deutsch die Schwerpunkt-Sprache für dieses Projekt ist.
• Persönliche Kontonutzung: Bereitschaft, Ihr primäres persönliches Google-Konto (kein Testkonto) zu verwenden und persönliche Datenquellen für eine echte Bewertung zu aktivieren.
• Flexibilität im Zeitplan: Vollzeitverfügbarkeit in Ihrer lokalen Zeitzone ist erforderlich. Wir stellen ein globales, 24-Stunden-Betriebsteam zusammen.
• Außergewöhnliches analytisches Denken: Fähigkeit, nuancierte und mehrdeutige KI-Antworten zu bewerten, insbesondere die Qualität der Personalisierung zu beurteilen.
• Kreatives Prompt-Engineering: Erfahrung im Entwerfen kreativer, mehrteiliger Startaufforderungen basierend auf persönlichem Kontext, um die Fähigkeiten des Modells gründlich zu testen.
• Starke Bewertungsfähigkeit: Verständnis von Personalisierungskonzepten, einschließlich der Fähigkeit, falsche Personalisierungen, schlechte Schlussfolgerungen und erzwungene Verbindungen zu identifizieren.
• Meticulous Attention to Detail: Fähigkeit, Side-by-Side (SxS) Modellantworten zu überprüfen und subtile Unterschiede in Natürlichkeit und Übererzählung zu erkennen.
• Ausgezeichnete schriftliche Kommunikation: Überlegene Fähigkeit, klare, prägnante und strukturierte Begründungen für Modellbewertungen zu schreiben, die ausdrücklich auf spezifische Turn-Nummern verweisen.
• Feedback: Fähigkeit, konstruktives Feedback und detaillierte Anmerkungen zu geben.
• Kommunikation: Ausgezeichnete Kommunikations- und Zusammenarbeitfähigkeiten.
• Unabhängigkeit: Selbstmotiviert und in der Lage, unabhängig in einer Remote-Umgebung zu arbeiten.
• Technische Einrichtung: Desktop/Laptop mit guter Internetverbindung.

Beschreibung

In dieser Rolle sind Sie Teil eines dynamischen Teams, das sich auf die Bewertung der Qualität personalisierter KI-Interaktionen konzentriert. Ihre tägliche Arbeit wird Folgendes umfassen:

• Entwerfen und Ausführen von mehrteiligen Gesprächsaufforderungen (typischerweise 1-5 Teile), die erfordern, dass die KI Ihre persönlichen Informationen und Erfahrungen nutzt.
• Bewertung der Modellantworten basierend auf Ihrer Absicht aus der Ausgangsaufforderung, Überprüfung, ob die Personalisierung angemessen angewendet wurde.
• Analyse der Antworten auf Verankerungsprobleme, um sicherzustellen, dass Behauptungen über Sie durch Beweise gestützt werden und nicht durch fehlerhafte Schlussfolgerungen oder Halluzinationen.
• Bewertung der Integrationsqualität, um sicherzustellen, dass persönliche Daten natürlich in die Antwort eingewebt sind, ohne robotermäßiges „Übererzählung“.
• Gründliche Bewertung und Rangfolge von zwei Modellantworten nebeneinander (SxS), um zu bestimmen, welche insgesamt hilfreicher, benutzerfreundlicher und angenehmer ist.
• Schreiben klarer, verteidigbarer Begründungen für Ihre Vergleiche, die ausdrücklich angeben, wo Probleme oder positive Aspekte im Gespräch auftraten.
• Extrahieren und Überprüfen von „Debug-Informationen“ aus dem Modell, um zu bestätigen, dass Chat-Zusammenfassungen und Datenquellen ordnungsgemäß genutzt wurden.
• Aufrechterhaltung strenger Datenhygiene durch Löschen von Bewertungsunterhaltungen, um zu verhindern, dass sie Ihre zukünftige Chat-Historie verschmutzen.

Bildung & Erfahrung

BS/BA-Abschluss oder gleichwertige Erfahrung in einem relevanten Bereich (z.B. Politik, Recht, Ethik, Linguistik, Journalismus, Informatik oder einem verwandten analytischen Bereich). Erfahrung in der Datenannotation, KI-Qualitätsbewertung, Inhaltsmoderation oder einer verwandten Rolle wird stark bevorzugt. Verpflichtungen erforderlich: mindestens 4 Stunden pro Tag und bis zu 40 Stunden pro Woche mit 4 Stunden Überlappung mit PST. Engagementtyp: Auftragnehmer. Engagementdauer: 3 Monate. Unser angebotener Satz für dieses Projekt beträgt 15 USD pro Stunde.

Bewertungsprozess

Vorgeschlagene Kandidaten erhalten ein Jobinteresseformular. Nach der Profilüberprüfung wird eine Bewertung geteilt, die innerhalb von 24 Stunden abgeschlossen werden muss. Basierend auf den Ergebnissen der Bewertung werden die ausgewählten Kandidaten kontaktiert, um die Anforderungen vor der Einarbeitung zu besprechen.

Nach der Bewerbung erhalten Sie eine E-Mail mit einem Anmeldelink. Bitte verwenden Sie diesen Link, um auf das Portal zuzugreifen und Ihr Profil zu vervollständigen.