Statistiques des agents IA

⚠️ Droits nécessaires : le droit Statistiques Agents IA dans le modèle d’autorisation. Pour comprendre comment les droits déterminent les données accessibles, consultez Gérer l’accès aux statistiques.

⚠️ Prérequis : la fonctionnalité Agents IA doit être activée sur votre compte. Tant qu’elle ne l’est pas, l’onglet Agents IA n’apparaît pas dans les statistiques, même si votre profil dispose du droit correspondant.

L’onglet Agents IA, accessible depuis Statistiques, permet de suivre l’utilisation des agents par les apprenants. Il est organisé en trois sous-onglets : Discussions, Apprenants et Simulations.

Choisir le sous-onglet

Discussions

Le sous-onglet Discussions affiche une ligne par conversation. Le tableau peut notamment présenter les colonnes :

• Alias ;
• Email ;
• Sujet de la discussion ;
• Signalée ;
• Raison du signalement ;
• Commentaire du signalement ;
• Agent ;
• Début de la discussion ;
• Temps passé ;
• Résultat de l’activité.

Cliquez sur Voir pour consulter la conversation en lecture seule.

La colonne Ouvrir la discussion est disponible uniquement si votre profil dispose du droit Se connecter comme un utilisateur. Le bouton Ouvrir permet alors d’accéder à la conversation dans l’application à la place de l’apprenant.

Apprenants

Le sous-onglet Apprenants regroupe les données par apprenant. Il affiche notamment :

• Alias ;
• Email ;
• Total des discussions ;
• Temps passé ;
• Dernière utilisation ;
• une colonne indiquant le nombre de discussions pour chaque type d’agent.

Par défaut, seules les colonnes Simulation et Recommandation liées aux agents sont affichées. Utilisez le bouton Colonnes pour ajouter les autres agents ainsi que Première utilisation.

Cliquez sur la ligne d’un apprenant pour afficher le détail de ses discussions.

Simulations

Le sous-onglet Simulations regroupe les données par simulation. Le tableau présente notamment :

• Sessions ;
• Apprenants ;
• Temps passé ;
• Taux de complétion ;
• Taux de réussite ;
• Score moyen ;
• Signalés ;
• Première utilisation ;
• Dernière utilisation.

Seules les sessions associées à une simulation enregistrée sont prises en compte. Lorsqu’une simulation a été supprimée, ses données restent disponibles sous l’intitulé Simulation supprimée.

Cliquez sur une ligne pour afficher les apprenants ayant participé à la simulation. Cette vue propose également l’indicateur Meilleur score.

Identifier l’agent utilisé

Dans le sous-onglet Discussions, la colonne Agent permet d’identifier le type d’agent utilisé. Quatre valeurs peuvent apparaître :

• Simulation ;
• Q/R ;
• Consolidation ;
• Recommandation.

Elles correspondent aux agents configurés dans Sélectionner les agents IA disponibles :

• Agent Simulation ;
• Agent Question ;
• Agent Consolidation ;
• Agent Recommandation.

L’indicateur Résultat de l’activité peut prendre les valeurs Réussie, Échouée ou En cours. Il est renseigné uniquement pour les discussions liées à une simulation.

💡 Une cellule vide dans Résultat de l’activité pour une discussion Q/R, Consolidation ou Recommandation est donc normale.

Lire les résultats d’une simulation

Le sous-onglet Simulations permet de suivre la complétion, la réussite et les scores obtenus lors des sessions.

⚠️ Le Score moyen est exprimé en pourcentage. Le symbole % n’est pas affiché : un Score moyen de 62 correspond donc à 62 %.

Dans le tableau des simulations, il correspond à la moyenne des scores obtenus sur les sessions évaluées. Dans le détail d’un apprenant, il correspond à la moyenne des scores obtenus sur ses propres sessions.

⚠️ Le Taux de complétion et le Taux de réussite sont calculés à partir des sessions lancées. Une session commencée mais abandonnée est donc prise en compte dans le calcul de ces deux indicateurs.

Une session qui n’a donné lieu à aucune évaluation est comptabilisée dans Sessions, mais pas dans le calcul du Score moyen. Il est donc normal que le nombre total de sessions soit supérieur au nombre de sessions ayant contribué au score.

Identifier un apprenant

La colonne Alias affiche l’alias choisi par l’apprenant. Si aucun alias n’est renseigné, son nom est affiché à la place.

⚠️ Le contenu de la colonne Alias peut donc varier d’un apprenant à l’autre. Pour identifier une personne de manière plus fiable, utilisez la colonne Email.

Comprendre les signalements

La colonne Signalée indique si l’apprenant a signalé une réponse de l’agent depuis l’application.

Lorsqu’un signalement existe :

• Raison du signalement indique le motif choisi par l’apprenant ;
• Commentaire du signalement reprend le commentaire éventuellement ajouté.

Ces champs restent vides lorsque la discussion n’a pas été signalée.

Dans le sous-onglet Simulations, l’indicateur Signalés correspond au nombre de sessions concernées par un signalement.

Ajouter un commentaire interne

La colonne Commentaire interne permet d’ajouter une note privée à une discussion. Cliquez sur l’icône en forme de crayon dans la cellule pour la renseigner.

Ce commentaire est visible uniquement par les utilisateurs du back-office et peut contenir jusqu’à 2 000 caractères.

Filtrer les données

Le panneau de filtres propose les principaux réglages disponibles dans les statistiques :

• la Période, réglée par défaut sur Les 90 derniers jours ;
• Département(s) associé(s), lorsque la hiérarchie de départements est activée ;
• les Groupes ;
• Inclure les apprenants désactivés ;
• les Filtres avancés.

Ces filtres permettent de restreindre les apprenants et les données pris en compte dans les tableaux. Pour comprendre précisément leur fonctionnement, consultez Filtres et audiences.

Personnaliser les colonnes

Le bouton Colonnes permet d’afficher ou de masquer les colonnes du tableau.

Certaines informations disponibles ne sont pas affichées par défaut. C’est notamment le cas, selon le sous-onglet consulté, de Taux de réussite, Signalés, Meilleur score, Première utilisation ou de certaines colonnes liées aux différents agents.

Exporter les données

Le bouton Export Excel génère un fichier à partir du tableau affiché, en reprenant notamment les colonnes visibles.

Avant d’exporter, utilisez donc le bouton Colonnes pour conserver uniquement les données dont vous avez besoin.

À savoir

Les sessions de test ne sont pas comptabilisées. Les essais réalisés depuis le back-office lors de la configuration d’une simulation n’apparaissent dans aucun des trois sous-onglets. Ils n’influencent ni les taux ni le Score moyen.

Ces statistiques mesurent l’utilisation des agents par les apprenants. Elles ne présentent aucune donnée sur le coût, la consommation ou le nombre de requêtes générées par les agents IA.

Le score d’une simulation dépend de sa configuration. Il est évalué par l’IA à partir des objectifs et des niveaux définis dans la simulation, ainsi que de la prestation de l’apprenant. La configuration de ces éléments influence donc directement le Score moyen affiché dans les statistiques.

Pour aller plus loin

• Qui sont nos agents d’apprentissage ? : pour découvrir les différents agents IA, les activer et définir les groupes qui peuvent y accéder.
• Configurer une simulation : pour comprendre comment les objectifs et les niveaux utilisés dans une simulation influencent les scores affichés dans les statistiques.
• Configurer l’IA : pour configurer la tonalité, le fournisseur et le modèle utilisés par les agents IA.
• Filtres et audiences : pour comprendre comment la période, le département, les groupes et les autres filtres influencent les données affichées.