Über den Job

Mercor verbindet erstklassige kreative und technische Talente mit führenden KI-Forschungslabors. Unser Hauptsitz ist in San Francisco, und zu unseren Investoren gehören Benchmark, General Catalyst, Peter Thiel, Adam D'Angelo, Larry Summers und Jack Dorsey.

Stellenbeschreibung

Position: Healthcare AI Evaluator
Typ: Vertrag
Vergütung: $150–$190/Stunde
Ort: Fernarbeit

Verantwortlichkeiten der Rolle

• Schreiben und Verfeinern von Anweisungen zur Steuerung des Modellverhaltens in Gesundheitsszenarien.
• Bewertung von LLM-generierten Antworten auf Gesundheitsanfragen hinsichtlich Genauigkeit, Logik, Klarheit und Vollständigkeit.
• Durchführung von Faktenprüfungen medizinischer Aussagen mit vertrauenswürdigen öffentlichen Quellen und maßgeblichen Referenzen.
• Kommentieren von Modellantworten durch Identifikation von Stärken, Verbesserungsmöglichkeiten und faktischen Ungenauigkeiten.
• Bewertung von Ton, Vollständigkeit und Angemessenheit der Antworten für den Einsatz im Gesundheitsbereich.
• Anwendung konsistenter Bewertungsstandards durch Befolgung klarer Taxonomien, Benchmarks und detaillierter Bewertungsrichtlinien.

Qualifikationen

Erforderlich

• 5+ Jahre Berufserfahrung im Gesundheitswesen, unterstützt durch einen entsprechenden Expertenabschluss (z.B. MD, DO, RN, NP, PA, PharmD, MPH oder gleichwertig).
• Erfahrung in einem oder mehreren der folgenden Unterbereiche: Allgemeine klinische Versorgung, Fachmedizin oder Chirurgie, Diagnostik, Bildgebung & Labormedizin, öffentliche Gesundheit, Gesundheitssysteme & Verwaltung.
• Erhebliche Erfahrung im Umgang mit großen Sprachmodellen (LLMs).
• Ausgezeichnete schriftliche Kommunikationsfähigkeiten für komplexe medizinische Themen.
• Hohes Maß an Genauigkeit und Sicherheit bei der Bewertung klinischer Argumentationen und medizinischer Erklärungen.

Bevorzugt

• Frühere Erfahrung mit RLHF, Modellevaluierung oder Datenannotierungsarbeiten.
• Erfahrung im Schreiben oder Bearbeiten hochwertiger medizinischer oder gesundheitsbezogener Inhalte.
• Erfahrung in klinischer Dokumentation, Charting oder Patientenkommunikation.
• Vertrautheit mit Bewertungsrichtlinien, Benchmarks oder Qualitätsbewertungssystemen.

Bewerbungsprozess

Der Bewerbungsprozess dauert ca. 20–30 Minuten. Bitte laden Sie Ihren Lebenslauf hoch, führen Sie ein KI-Interview basierend auf Ihrem Lebenslauf durch und reichen Sie das Formular ein.

Ressourcen & Unterstützung

• Für Details zum Bewerbungsprozess und Plattforminformationen besuchen Sie bitte: https://talent.docs.mercor.com/welcome/welcome
• Bei Fragen oder für Unterstützung kontaktieren Sie: support@mercor.com

PS: Unser Team überprüft täglich Bewerbungen. Bitte schließen Sie Ihr KI-Interview und Ihre Bewerbungsschritte ab, um für diese Gelegenheit berücksichtigt zu werden.