Surveillance IA
Après avoir déployé AI Assistant, vous pouvez utiliser AI Monitoring pour obtenir une visibilité sur son utilisation et ses performances. Il vous permet de comprendre qui utilise AI Assistant, quelles tâches il prend en charge, où il réussit ou se bat, et comment cela est lié à l’adoption, au coût et à l’impact commercial.
La surveillance de l’IA s’organise autour de trois domaines :
- Adoption et engagement dans le tableau de bord Usage
- Qualité et performance en Conversation Replay et en feedback
- Coût et consommation dans le tableau de bord Crédits
Ensemble, ils vous aident à AI Assistant avec des données claires au lieu de conjectures.
Tableau de bord d’utilisation
Le tableau de bord d’utilisation est l’endroit central pour l’adoption et l’engagement dans votre organisation. Il relie les tendances de haut niveau à une analyse plus approfondie. À partir de n’importe quelle mesure du tableau de bord, vous pouvez explorer des conversations individuelles pour voir ce qui motive les chiffres.
Ce que vous pouvez examiner
- invites au fil du temps : croissance globale de l’utilisation et tendances d’adoption.
- Utilisateurs actifs et conversations : quelle est l’ampleur de l’adoption de l’assistant parmi les utilisateurs.
- Nombre moyen d’invites par conversation : profondeur de l’engagement et si les interactions sont substantielles.
- Commentaires (pouces vers le haut / vers le bas) : Signaux précoces sur la qualité et la satisfaction de l’utilisateur.
Relecture de la conversation et commentaires
Conversation Replay affiche les interactions d’IA réelles, et pas seulement les agrégats. Vous pouvez y accéder à partir du tableau de bord d’utilisation lorsque vous devez passer des tendances à des échanges spécifiques.
Ce que vous pouvez examiner
- Invite et historique des réponses : question de l’utilisateur et réponses AI Assistant, telles qu’elles ont été fournies.
- Signaux de retour d’informations : quelles interactions les utilisateurs et utilisatrices ont-ils marquées positivement ou négativement, pour prioriser les améliorations ?
- Modèles au fil du temps : thèmes récurrents dans les expériences fortes et faibles dans de nombreuses conversations.
Cette vue vous aide à aller au-delà des cumuls pour voir ce qui fonctionne, où les utilisateurs et utilisatrices rencontrent des problèmes de friction, et comment améliorer la qualité de la réponse au fil du temps. Les tendances d’utilisation répondent ce qui se passe. La relecture de la conversation permet d’expliquer pourquoi.
Tableau de bord Credits
Une fois que vous avez compris l’utilisation et la qualité, le tableau de bord Crédits répond à la manière dont cette activité se traduit en consommation et en coût.
Ce que vous pouvez examiner
- Total des crédits consommés : utilisation globale de l’assistant AI en termes de crédit.
- Tendances quotidiennes et mensuelles : pics, creux et changements dans les schémas d’utilisation.
- Crédits restants : ce qui reste dans votre allocation pour que vous puissiez planifier avant les limites ou les dépassements.
Utilisez cette vue pour prévoir l’utilisation, vous aligner sur le budget et répartir les crédits entre les équipes de manière plus prévisible.