Senior Software Engineer - Paris
Ingénieur logiciel senior responsable du framework d'évaluation qui orchestre et exécute benchmarks pour agents d'utilisation d'ordinateur. Vous rejoignez l'équipe d'évaluation et travaillez avec les chercheurs et les ingénieurs déployés en avant pour rendre les runs fiables, rapides et reproductibles.
Ce que vous ferez
- Aider chercheurs et ingénieurs déployés à intégrer de nouveaux benchmarks
- Définir et appliquer le standard d'entrée des benchmarks dans le framework
- Gérer ordonnancement, observabilité et capacité de cluster
- Assurer résultats reproductibles à travers les essais
- Automatiser mesures clients pour remonter aux harnesses et modèles
Ce qu'ils recherchent
- Expérience backend avec Python en production
- Avoir créé outils de test, QA ou évaluation utilisés par d'autres équipes
- Avoir opéré systèmes distribués sur Kubernetes en cloud public
- Avoir livré systèmes end to end, APIs et intégrations
- Connaissance bases relationnelles/non relationnelles et queues (SQS/RabbitMQ/Kafka)
Compétences
Résumé rédigé par StartupJobs à partir de l'annonce de l'entreprise. L'annonce complète est sur le site de l'entreprise.
Cette offre provient de la page carrières de H Company. Nous renvoyons directement vers la source.