Technology AI Evaluation Expert

Remote | United States • Remote • Senior • 05.10.2026
AI Data Science
Auf einen Blick

Gestalte KI-Evaluierungsaufgaben für Software Engineering und Data Science. 3+ Jahre technische Berufserfahrung erforderlich.

💰 $60–75/h 📊 Mid-Level 🕒 Contract 🌍 Remote 🗺️ Worldwide
  • 3+ Jahre Software Engineering / Data Science
  • Verständnis technischer Dokumentation
  • Erfahrung mit Codebases und APIs
  • Analytisches Denken und Problem Solving
Software Engineering Data Science Technical Documentation API Design System Architecture

Angegeben: $60–75/h · Marktschätzung: ~$156.000–195.000/Jahr.

✅ Geeignet für
  • Software Engineers mit KI/ML Interesse
  • Data Scientists mit Benchmarking-Erfahrung
  • Technische Fachexperten
  • Teilzeitarbeit suchende Profis
🚫 Weniger geeignet
  • Ohne technische Berufserfahrung
  • Vollzeitpositionen suchend
  • Anfänger ohne 3+ Jahre Erfahrung
💡 Gut zu wissen
  • Fokus auf realistische, mehrstufige Aufgaben basierend auf echten Workflows
  • Benchmark-Qualität und Konsistenz kritisch
  • Keine Visumsponsering verfügbar
  • Projekte können verlängert, verkürzt oder beendet werden

Über das Unternehmen

Ein fortgeschrittenes KI-Forschungsprojekt, das die Fähigkeiten von KI-Systemen bei der Interpretation von technischen Dokumenten und komplexen Workflows verbessert.

Deine Aufgaben

  • Entwurf von realistischen, mehrstufigen Benchmark-Aufgaben auf Basis von technischen Workflows
  • Entwicklung von Herausforderungen anhand von Spezifikationen, Architekturdiagrammen, API-Dokumentation und Codebasen
  • Erstellung von umfassenden Ground-Truth-Lösungen und strukturierten Scoring-Rubriken
  • Bewertung von AI-generierten Outputs für technische Genauigkeit und Klarheit
  • Collaboration mit Research Teams zur Verbesserung der Benchmark-Qualität

Deine Voraussetzungen

  • Mindestens 3 Jahre professionelle Hands-on Erfahrung in Software Engineering, Data Science oder Data Analytics
  • Starkes Verständnis von technischer Dokumentation, Software Development Workflows und Engineering Best Practices
  • Erfahrung mit Codebases, APIs, technischen Spezifikationen oder System Architecture
  • Ausgezeichnete analytische und Problemlösungsfähigkeiten
  • Starke schriftliche Kommunikation und Fähigkeit zur Erstellung klarer technischer Anweisungen

Benefits

  • 60-75 USD pro Stunde
  • 15-20 Stunden pro Woche
  • Komplett remote und flexibel
  • Unabhängiger Auftragnehmer
  • Wöchentliche Zahlungen