Supervisión de IA
Después de implementar AI Assistant, puede usar Monitoring para obtener visibilidad sobre cómo se usa y funciona. Le permite comprender quién usa AI Assistant, qué tareas admite, dónde tiene éxito o dónde tiene problemas y cómo se vincula con la adopción, el coste y el impacto empresarial.
La monitorización de IA se organiza en torno a tres áreas:
- Adopción y participación en el panel Usage
- Calidad y rendimiento en Conversation Replay y comentarios
- Costo y consumo en el panel Créditos
Juntos, le ayudan a operar AI Assistant con datos claros en lugar de conjeturas.
Tablero de uso
El panel de uso es el lugar central para la adopción y la participación en toda la organización. Conecta las tendencias de alto nivel con un análisis más profundo. Desde cualquier métrica del panel, puede explorar en profundidad conversaciones individuales para ver qué impulsa los números.
Lo que puedes revisar
- Indicadores a lo largo del tiempo: crecimiento general del uso y tendencias de adopción.
- Usuarios activos y conversaciones: La amplitud con la que se adopta el asistente entre los usuarios.
- Promedio de mensajes por conversación: Profundidad de la participación y si las interacciones son sustantivas.
- Comentarios (pulgar arriba / abajo): Señales tempranas sobre la calidad y la satisfacción del usuario.
Reproducción de conversación con comentarios
Conversation Replay muestra interacciones de IA reales, no solo agregados. Se accede a él desde el panel Uso cuando necesita pasar de tendencias a intercambios específicos.
Lo que puedes revisar
- Historial de preguntas y respuestas: La pregunta y las respuestas del usuario, tal como se entregaron.AI Assistant
- Señales de comentarios: Qué interacciones han marcado los usuarios de forma positiva o negativa para priorizar las mejoras.
- Patrones en el tiempo: temas recurrentes en experiencias fuertes y débiles en muchas conversaciones.
Esta vista le ayuda a ir más allá de los resúmenes para ver qué funciona, dónde golpean los usuarios la fricción y cómo mejorar la calidad de la respuesta a lo largo del tiempo. Las tendencias de uso responden a lo que está sucediendo. La repetición de la conversación ayuda a explicar por qué.
Credits panel
Una vez que comprenda el uso y la calidad, el panel Créditos responderá a cómo esa actividad se traduce en consumo y coste.
Lo que puedes revisar
- Créditos totales consumidos: Uso general del Asistente de IA en términos de crédito.
- Tendencias diarias y mensuales: Picos, caídas y cambios en los patrones de uso.
- Créditos restantes: Lo que queda en su asignación para que pueda planificar antes de límites o excesos.
Utilice esta vista para prever el uso, alinearse con el presupuesto y asignar créditos entre equipos de forma más predecible.
Panel de comentarios del usuario
El panel de comentarios del usuario ayuda a las organizaciones a revisar los comentarios detallados del usuario enviados para las interacciones del asistente de IA. Proporciona visibilidad sobre las conversaciones que los usuarios marcaron positiva o negativamente y permite a los administradores y centros de excelencia (COE) investigar los detalles de interacción detrás de los comentarios.
A partir de los resúmenes de comentarios, los usuarios pueden explorar en profundidad conversaciones individuales para revisar los mensajes, las respuestas, los detalles de razonamiento y las notas de comentarios asociados con la interacción.
Qué puede revisar
Tendencias de comentarios a lo largo del tiempo: Comprenda cómo cambian los comentarios de los usuarios en los flujos de trabajo y los períodos de tiempo.
Pulgares arriba y abajo comentarios: revisar las señales de interacción positivas y negativas enviadas por los usuarios.
Categorías de comentarios: Comprenda los tipos de respuestas que los usuarios identificaron como útiles o problemáticas.
Desgloses en el nivel de conversación: Pasar de resúmenes de comentarios a conversaciones individuales vinculadas a eventos de comentarios.
Historial de mensajes y respuestas: revise los mensajes de usuario y las respuestas del Asistente de inteligencia artificial asociados a los comentarios enviados.
Detalles y notas de los comentarios: revisa el contexto y los comentarios adicionales proporcionados por los usuarios durante el envío de los comentarios.
Este tablero ayuda a las organizaciones a comprender mejor las experiencias de los usuarios, investigar problemas e identificar oportunidades para mejorar la calidad y la eficacia del asistente de IA a lo largo del tiempo.
Panel de usuarios activos
El panel Usuarios activos ayuda a las organizaciones a comprender cómo la adopción y la participación del Asistente de IA varían entre los usuarios a lo largo del tiempo. Proporciona visibilidad sobre quién utiliza el asistente de IA de forma activa, con qué frecuencia interactúan y qué flujos de trabajo impulsan la mayor actividad en la organización.
Desde resúmenes de nivel de usuario, los administradores y los Centros de excelencia (COE) pueden explorar en profundidad la actividad y las conversaciones de los usuarios individuales para comprender mejor los patrones de participación y el comportamiento de uso.
Qué puede revisar
- Usuarios activos a lo largo del tiempo: Rastree las tendencias de adopción y participación en toda la organización.
- Patrones de participación del usuario: Comprenda con qué frecuencia interactúan los usuarios con el Asistente de IA y cómo cambia la participación con el paso del tiempo.
- Actividad de conversación: Revise el número de conversaciones y mensajes generados por usuarios individuales.
- Usuarios activos principales: Identifique a los usuarios y equipos altamente comprometidos que impulsan la adopción del Asistente para IA.
- Desgloses en el nivel de usuario: Pásese de las métricas de participación agregadas a los detalles de conversación y actividad de usuario individual.
- Tendencias de uso por flujo de trabajo: Comprenda qué flujos de trabajo y casos de uso generan la mayor participación entre los usuarios.
- Coherencia de la participación: Identifique a los usuarios con patrones de participación recurrentes, así como a los usuarios con una actividad que disminuye con el tiempo.
Este tablero ayuda a las organizaciones a medir la adopción, identificar las tendencias de participación y comprender mejor cómo se utiliza el asistente de IA en los equipos y flujos de trabajo.