🔍 Offre Freelance : Data Scientist – Analyse & Évaluation des Performances d’Agents IA

📍 Télétravail
⏳ Contrat horaire
💰 100–120 $/heure

🎯 Aperçu du Poste

Une entreprise spécialisée dans l’évaluation des agents IA recrute un Data Scientist / Analyste IA pour analyser en profondeur les performances de modèles appliqués à des tâches du secteur financier.
Le rôle consiste à identifier les causes d’échec, repérer les patterns, améliorer le framework d’évaluation et proposer des solutions concrètes pour optimiser les systèmes IA.

🧠 Missions Principales

🔎 Analyse Statistique des Échecs

• Détection des schémas d’erreurs selon les prompts, rubriques, fichiers, templates, tags, etc.
• Étude multidimensionnelle des performances selon les catégories de tâches et sous-domaines financiers.

🛠 Root Cause Analysis

• Identifier l’origine des échecs : mauvaise conception des tâches, rubriques ambiguës, fichiers complexes ou limites du modèle.

📊 Reporting & Visualisation

• Création de dashboards, graphiques et rapports sur les clusters d’échec, edge cases, opportunités d’amélioration.

📈 Optimisation du Cadre Qualité

• Recommandations pour affiner les rubrics, les critères d’évaluation et les designs de tâches.

🤝 Collaboration

• Présentation régulière des insights aux équipes techniques et aux experts en data labeling.

📌 Profil Recherché

🎓 Compétences essentielles

• Solide maîtrise de l’analyse statistique, tests d’hypothèse et détection de patterns.
• Très bon niveau en Python (pandas, scipy, matplotlib) ou R.
• Expérience en EDA (exploratory data analysis).
• Connaissance des méthodes d’évaluation des LLM/agents IA.
• Maîtrise d’Excel, SQL et outils BI (Tableau, Looker).

⭐ Atouts supplémentaires

• Expérience en évaluation IA ou QA.
• Compétences en finance (atout, pas obligatoire).
• Connaissance des benchmark frameworks.
• 2 à 4 ans d’expérience dans un poste similaire.

📩 Comment Postuler ?

Candidatez via le lien suivant :
👉 Postulez Ici