Auf einen Blick
Suche nach Software-Engineering-Expert zur Entwicklung und Bewertung von AI-Benchmarks für Softwareentwicklungsaufgaben.
💰 $60–90/h
📊 Mid-Level
🕒 Contract
🌍 Remote
🗺️ Worldwide
- Python-Expertise
- Software-Engineering-Erfahrung
- 1+ Jahr professionelle Erfahrung
- Master oder gleichwertiger Erfahrung
Python
Software Engineering
Git
AI Evaluation
Benchmark Development
Debugging
Angegeben: $60–90/h · Marktschätzung: ~$124.800–187.200/Jahr.
✅ Geeignet für
- KI-Sicherheitsforschern
- Softwareentwicklern mit Lust auf KI-Bewertung
- Personen mit Master in CS/STEM
🚫 Weniger geeignet
- Anfängern ohne Industrieerfahrung
- Kandidaten ohne Python-Expertise
- Personen, die mehr als 35h/Woche arbeiten können
💡 Gut zu wissen
- Vertrag mit flexiblen Arbeitszeiten, aber feste 35h/Wochen-Zusage erforderlich
- Fokus auf AI-Benchmark-Qualität, nicht reine Kodierung
- Zusammenarbeit mit KI-Forschern, nicht mit Produktteams
Über das Unternehmen
Dies ist eine Initiative für eines unserer Kunden, die sich auf die Entwicklung der nächsten Generation von Bewertungs-Benchmarks für Grenzmodelle in der Künstlichen Intelligenz konzentriert.
Deine Aufgaben
- Gestaltung realistischer, mehrstufiger Software-Engineering-Challenges basierend auf praktischen Entwicklungs-Workflows
- Entwicklung umfassender Referenzlösungen in Python, die reproduzierbar und überprüfbar sind
- Bewertung von AI-generierten Lösungen auf Implementierungsfehler und Debugging-Herausforderungen
- Überprüfung von Benchmark-Tasks durch Fachexperten mit detailliertem Feedback
- Zusammenarbeit mit KI-Forschern zur Verbesserung der Evaluierungsmethodik
- Nutzung von KI-Code-Assistenten als Teil des Entwicklungs-Workflows
Deine Voraussetzungen
- Master-Abschluss, PhD oder gleichwertiger praktischer Erfahrung in Informatik oder STEM-Disziplin
- Mindestens 1 Jahr professionelle Erfahrung in Software-Engineering oder Forschungsingenieurwesen
- Starke praktische Kenntnisse in Python einschließlich Softwaredesign und Debugging
- Erfahrung mit Git und modernen Entwicklungs-Workflows
- Verständnis von Softwarearchitektur und Best Practices
- Verfügbarkeit von ca. 35 Stunden pro Woche
Benefits
- Vollständig remote mit flexiblen Arbeitszeiten
- Möglichkeit, die Zukunft der KI-Bewertung mitzugestalten
- Zusammenarbeit mit führenden KI-Forschern
