Administrador: supervise el uso y los créditos de la IA

Última actualización
Guardar como PDF

Contexto

La pestaña Informes dentro del área Control Tower de Datagrid ayuda a los administradores de cuentas a monitorear el uso del agente y el consumo de crédito. Ya sea que sea cliente de Datagrid o cliente de Procore AI (Digital Coworker), estos informes brindan visibilidad a nivel de cuenta de las tendencias de consumo de créditos de los usuarios, los costos de créditos de almacenamiento de datos, el uso de agentes y las métricas de participación de los usuarios.

Este tutorial lo ayuda a acceder y hacer uso de los datos de uso de su cuenta, lo que puede ayudarlo a establecer barreras de protección opcionales en la pestaña Presupuesto o a tomar decisiones a nivel de cuenta sobre la expansión de la IA y los objetivos de uso.

Aspectos para tener en cuenta

Permisos de usuario requeridos:
- Se requieren permisos de "Administrador" en Datagrid para acceder a las funciones de Control Tower.
  - El rol "Compañía Administrador" de Procore se asigna al rol "Administrador" en Datagrid, mientras que el rol "Proyecto Administrador" de Procore se asigna a "Miembro" en Datagrid. Por lo tanto, el "Administrador del proyecto" no puede acceder automáticamente a las funciones de Control Tower en Datagrid, como estas barreras de protección de presupuesto.
Clientes de Procore AI:
- Todos los niveles de los paquetes de Digital Coworker (Starter, Pro y Cuenta nivel empresarial) tienen acceso a Control Tower, incluidos los presupuestos y los reportes.
- Requisitos previos: Dado que actualmente solo se puede acceder a las funciones de Control Tower a través del producto Datagrid independiente y no dentro de Procore, administrador de Procore deben realizar la secuencia de acreditación detallada en Habilitar Procore AI antes de poder acceder a las funciones de Control Tower en Datagrid.

Pasos

Inicie sesión en app.datagrid.ai
Nota: Los clientes de Procore con una suscripción activa a Digital Coworker Procore AI deben iniciar sesión en Datagrid a través del SSO de Procore.
Asegúrate de estar en el espacio de equipo correcto . Si su compañía tiene más de un espacio de equipo, seleccione el que desee en el menú desplegable en la parte superior del panel de navegación izquierdo.
En la parte inferior izquierda de la página de aterrizaje, haz clic en Control Tower.
Haga clic en la pestaña Reportes.
Busque el filtro desplegable de intervalo de fechas en la esquina superior derecha y ajuste los parámetros de vista según sea necesario: Últimos 7 días, Últimos 30 días, Últimos 60 días o Últimos 90 días.
Analice los datos de acuerdo con sus objetivos. Explore a continuación para obtener más información sobre nuestros tipos de reportes.

Consumo de créditos por categoría

El gráfico de barras Consumo de créditos por categoría visualiza el consumo de créditos por operación a nivel macro: Inteligencia y generación, Ingesta y configuración de datos, Actividad e infraestructura, y Almacenamiento de datos.

Categoría de crédito	Operaciones Monitoreadas
Inteligencia y Generación	Ejecución de chat en tiempo real, razonamiento de agentes de varios pasos y generación de carga de texto.
Ingesta y configuración de datos	Procesamiento inicial de archivos, análisis de documentos y representación vectorial de archivos de proyectos históricos.
Actividad e Infraestructuras	Webhooks de back-end, mantenimiento de conexiones y tráfico de orquestación activo.
Indexación multimodal	El cargo diario del libro mayor de tarifa plana continuo calculado en 3 créditos por GB/día.

Métricas globales

La sección Métricas globales tiene tarjetas que monitorean la cantidad de chats, espacios de equipo, agentes y usuarios. Estas cifras le brindan una visión amplia del panorama y la adopción de su ecosistema de IA.

En la esquina de algunas tarjetas hay un número rojo o verde que muestra los cambios netos para el intervalo de fechas elegido. Por ejemplo: Con el filtro de intervalo de fechas establecido en "7 días" en la parte superior derecha de la ventana Reportes, es posible que vea que el total de agentes de IA de la cuenta es 106, con un +10 verde. Esto significa que se crearon 10 nuevos agentes en los últimos 7 días, lo que eleva el número total a 106. Si cambia el rango a "30 días", es posible que vea un número verde más alto, pero el total seguirá siendo 106.

Total de chats: Muestra el volumen acumulado de mensajes conversacionales en tiempo real ejecutados por sus equipos.
- Cada vez que un usuario escribe un mensaje en el redactor de mensajes y presiona ENTER o hace clic en la flecha de envío, este contador aumenta en uno. Para los usuarios de Procore AI: las interacciones en Datagrid y el panel lateral de Procore AI cuentan para este punto de datos.
Espacios de equipo: Muestra el número total de espacios de equipo (proyectos) asignados y ejecutándose activamente en la cuenta.
Agentes de IA: Realiza un seguimiento del número total de plantillas de agente prediseñadas o personalizadas que se ejecutan en sus proyectos.
Usuarios activos: El número de miembros únicos del equipo que utilizan las herramientas de IA en toda la cuenta.

Ranking de actividades

En la sección Clasificación de actividad , las tablas de clasificación te ayudan a identificar dónde es más alta la adopción de la IA entre los tres principales espacios de equipo (proyectos), agentes y usuarios de toda la cuenta. En este momento, solo puede ver los totales de uso de los tres usuarios principales de cada área, no de todos los usuarios.

Espacios de equipo más activos: Clasifica los espacios de trabajo de su proyecto según el volumen general de chat. Utilice esta tarjeta para ver qué proyectos dependen más de la utilidad del agente en tiempo real.
Agentes más utilizados: Identifica qué plantillas de agente específicas (p. ej., Revisor de submittal, Agente de búsqueda profunda) ejecutan la mayoría de las consultas en segundo plano.
Usuarios más comprometidos: Los tres principales usuarios de la herramienta, junto con su total de chats y cuánto es mayor o menor que cantidad durante el período anterior.

Junto a muchos de los totales hay un número rojo o verde que muestra los cambios netos para el intervalo de fechas elegido. Por ejemplo: Con el intervalo de fechas establecido en "7 días" en la parte superior derecha de la ventana Reportes, puede ver un usuario con 72 chats y un +20 verde al lado. Esto significa que el usuario ha enviado 72 chats a la IA en total, y 20 de ellos fueron en los últimos siete días. Si cambia el rango a "30 días", es posible que vea un número verde más alto, pero el total seguirá siendo 72.

Desglose de uso

Para obtener una auditoría más detallada de su libro mayor, desplácese hasta la sección Desglose de uso y seleccione uno de los siguientes tipos de conjuntos de datos. Para cada uno de estos informes, puede ordenar por una columna en particular para identificar patrones.

Por ejemplo, ordene por nombre de agente en el reporte "Indicaciones y actividad del usuario" para identificar qué herramientas de automatización especializadas están recibiendo la mayor adopción por parte de los usuarios, lo que le permite identificar flujos de trabajo de proyectos de alto rendimiento y estandarizar estrategias de habilitación exitosas en otros espacios de equipo activos.

Indicaciones y actividad del usuario

Este reporte captura el texto real utilizado cada vez que un usuario interactúa con la IA en cualquier espacio de equipo (proyecto) de la cuenta. Estas consultas de usuario sin procesar, junto con el procesamiento semántico de back-end y las palabras clave, pueden mostrar tendencias en toda su organización o respaldar la auditoría de cumplimiento.

Elija Indicaciones y actividad del usuario en el menú desplegable en la sección "Desglose de uso".
Desplácese para ver los datos del reporte, que incluyen:
- Fecha: Fecha del calendario de la interacción del usuario.
- Usuario: Nombre de la persona que envió el mensaje.
- Nombre del agente: Nombre del agente proporcionado o personalizado al que se llama durante la interacción. Los campos en blanco indican el asistente de plataforma estándar.
- Espacio de equipo: El proyecto específico en el que se produjo la sesión activa.
- Mensaje del usuario: la cadena de texto sin procesar y sin filtrar ingresada en el chat por el usuario final.
- Tarea: la etiqueta de clasificación asignada por la capa de orquestación del sistema (por ejemplo, planificación de acciones, recuperación semántica, recuperación sql) para enrutar la solicitud en función de la intención del usuario detectada.
- Palabras clave: Términos de búsqueda básicos y sustantivos aislados de la entrada del usuario por el sistema para buscar archivos dentro de la base de datos del proyecto.
- Consulta reescrita: La cadena de búsqueda semántica generada por el modelo de razonamiento de la IA para maximizar la precisión de la recuperación de los datos del proyecto.
Opcional: Haga clic en el botón Exportar para que el reporte se descargue en su dispositivo y pueda ver los datos completos, usarlos para análisis externos o crear presentaciones.

Consumo de créditos de los usuarios

Este reporte muestra un registro detallado de transacciones de cada fracción de crédito consumida por la actividad del usuario junto con el nombre del usuario, la acción del sistema y más.

Elija Consumo de crédito de usuarios en el menú desplegable en la sección 'Desglose de uso'.
Desplácese para ver el registro de transacciones detallado que rastrea cada fracción de un crédito consumido por la actividad del usuario. Revise las columnas para auditar ítems específicos:
- Créditos: Costo de crédito exacto deducido (mostrado como un valor decimal negativo).
- Usuario: miembro del equipo que inició la llamada al sistema.
- Acción: Lo que estaba haciendo el sistema (p. ej., interacción con el agente, ejecución de la canalización de importación, procesamiento del conjunto de datos).
- Tipo de recurso: capa de activos técnicos utilizada para realizar esa acción (por ejemplo, agente, canalización de datos, conjunto de datos, conocimiento).
- Recurso: conector específico o nombre de activo utilizado (p. ej., conector Procore, agente de Seguridad del sitio).
Opcional: Haga clic en el botón Exportar para que el reporte se descargue en su dispositivo y pueda ver los datos completos, usarlos para análisis externos o crear presentaciones.

Consumode créditos de T eamspaces

Este reporte asigna los costos de infraestructura directamente a entornos de proyectos específicos. Expone las partidas automatizadas de almacenamiento de conjuntos de datos, lo que le permite realizar un seguimiento del costo del volumen de datos que cada espacio de equipo (proyecto) mantiene en su índice vectorial activo.

Elija Consumo de créditos de Teamspaces en el menú desplegable de la sección "Desglose de uso".
Desplácese para ver los costos de infraestructura en curso asignados directamente a entornos de proyectos específicos. Las columnas incluyen:
- Créditos: Muestra el costo de crédito exacto deducido (se muestra como un valor decimal negativo).
- Espacio de equipo: Identifica al miembro del equipo que inició la acción.
- Acción: Identifica lo que estaba haciendo el sistema (por ejemplo, aprendizaje de agentes (vectorización), interacción de agentes, procesamiento de conjuntos de datos).
- Tipo de recurso: la capa de activos técnicos utilizada para realizar esa acción (por ejemplo, agente, canalización de datos, conjunto de datos, conocimiento).
- Recurso: la aplicación que realizó la tarea.
- Fecha: Fecha del calendario en que tuvo lugar la acción.
Opcional: Haga clic en el botón Exportar para que el reporte se descargue en su dispositivo y pueda ver los datos completos, usarlos para análisis externos o crear presentaciones.