Senior-KI-Trainer (m/w/d)

Über die Rolle

Stellenbezeichnung: Senior-KI-Trainer
Art der Tätigkeit: Selbstständiger Auftragnehmer, Remote
Standort: Nordamerika und Europa.

micro1 sucht Senior-KI-Trainer für die Zusammenarbeit an einem kundengetriebenen Projekt, das die Qualität von KI-Systemen durch Modelltraining und Bewertung auf Expertenniveau verbessert. In dieser Rolle setzen Sie Ihr Generalistenwissen und Ihre praktische Erfahrung mit KI-Produkten ein, um das Training von KI-Systemen der nächsten Generation zu unterstützen. Ihre Arbeit prägt, wie Modelle lernen, schlussfolgern und performen, indem Sie hochwertigen, praxisnahen Input liefern.

Ihre Aufgaben

• Bewertung der Leistung von KI-Chat- und Suchwerkzeugen unter standardisierten, wiederholbaren Bedingungen.
• Anwendung detaillierter Bewertungsrichtlinien, um Modellantworten präzise zu bewerten, zu ranken und zu annotieren und dabei strukturiertes Feedback zu geben, das die Modellleistung verbessert.
• Verfassen, Verfeinern und Stresstesten von Prompts, die die Fähigkeiten von Modellen ausloten, mit Abdeckung vielfältiger Szenarien, Grenzfälle und Nutzerabsichten.
• Überprüfung von Konsistenz und Genauigkeit über Bewertungen hinweg und Korrektur von Abweichungen zwischen Bewertungen und dem zugrunde liegenden Bewertungsraster bzw. den Richtlinien.
• Nutzung von KI-Trainingswerkzeugen und -Plattformen, um Erkenntnisse zu erfassen und Bewertungsdatensätze im Einklang mit Projektstandards und Meilensteinen einzureichen.
• Zusammenarbeit mit Projekttrainern und Mitwirkenden, um Unklarheiten zu klären, Richtlinien zu verfeinern und die Konsistenz der Bewertungen im Team sicherzustellen.
• Teilnahme an fortlaufenden Qualitätsprüfungen und Einarbeitung des Feedbacks, um strenge Trainings- und Annotationsstandards zu wahren.

Anforderungen

• Außergewöhnliche Sorgfalt und Genauigkeit bei der Prüfung und Bewertung KI-generierter Inhalte.

• Ausgeprägte schriftliche und mündliche Kommunikationsfähigkeit für effektive Zusammenarbeit, Berichterstattung und zeitnahe Updates zu Fortschritten und Herausforderungen.

• Nachgewiesenes Zeitmanagement und Selbstorganisation für eine selbstständige, ortsunabhängige Projektarbeit.

• Analytische und lösungsorientierte Denkweise mit proaktivem Umgang mit Herausforderungen bei der Bewertung.

• Nachgewiesene Erfahrung mit KI-Modelltraining, RLHF (bestärkendes Lernen aus menschlichem Feedback), Datenlabeling oder ähnlichen datenzentrierten Bewertungsprojekten.

• Vertrautheit mit KI-Produkten und -Werkzeugen, einschließlich Prompt Engineering und einem Verständnis von Modellverhalten und -grenzen.

• Erfahrung im Verfassen von Bewertungsrastern, im Bewerten von Modellausgaben oder im Prüfen von KI-Antworten auf Genauigkeit, Nützlichkeit und Sicherheit.

• Hintergrund in KI-Training, Aufbereitung von Daten für maschinelles Lernen oder LLM-fokussierten Projekten (stark bevorzugt).