Retour aux offres

Staff AI Engineer - Agent Evaluation Platform (x/f/m)

  • Hybride
  • Paris
  • FullTime

Ingénieur logiciel IA en charge de construire et exploiter la plateforme d'évaluation des systèmes agentiques. Rattaché à l'équipe AI Evaluation (EvalX), vous travaillez avec les équipes produit pour améliorer la qualité et la sécurité des produits IA.

Ce que vous ferez

  • Concevoir, livrer et exploiter des outils d'évaluation en production
  • Travailler avec équipes produit pour définir plans d'amélioration d'évaluation
  • Concevoir stratégies d'évaluation pour systèmes agentiques
  • Construire capacités de sampling, monitoring et génération de cas de test
  • Transformer besoins récurrents en fonctionnalités plateforme réutilisables

Ce qu'ils recherchent

  • 6+ ans d'expérience comme ingénieur logiciel ou ML engineer
  • Expérience d'évaluation pour systèmes LLM ou agentiques
  • Maîtrise des bonnes pratiques de développement logiciel
  • Orientation produit et collaboration inter-équipes
  • Confortable à l'oral et à l'écrit en anglais

Compétences

  • Python
  • embeddings
  • clustering
  • statistical sampling
  • distribution monitoring
  • LLM-as-a-judge
  • CI/CD
  • APIs

Résumé rédigé par StartupJobs à partir de l'annonce de l'entreprise. L'annonce complète est sur le site de l'entreprise.

Cette offre provient de la page carrières de Doctolib. Nous renvoyons directement vers la source.

Postuler sur le site de l’entreprise

Recevez des offres similaires par e-mail

Un e-mail par semaine avec les nouvelles offres du même domaine et de la même ville. Rien d'autre.

Offres similaires