Vista previa característica
Aún estamos desarrollando activamente el monitoreo de agentes de IA, ¡pero nos entusiasma que pruebe esta potente nueva funcionalidad! Esta funcionalidad se proporciona actualmente como parte de un programa de vista previa de conformidad con nuestras políticas de versión preliminar.
Habilitar el monitoreo de IA le permite observar el rendimiento de sus agentes de IA de extremo a extremo. Cuando tu aplicación ejecuta un workflow agéntico de varios pasos, New Relic captura la ejecución completa, cada invocación de agente, cada llamada a herramienta y cada traspaso, para que puedas entender qué sucedió, dónde se ralentizó y dónde algo salió mal.
El monitoreo de agentes de IA admite frameworks agénticos populares, incluidos LangGraph, Strands y AutoGen.
No se requiere configuración adicional más allá de habilitar el monitoreo de IA en su agente APM existente. Una vez habilitado, New Relic detecta e instrumenta automáticamente agentes y herramientas dentro de estos frameworks.
¿Por qué monitorear agentes de IA?
Los agentes de IA modernos son complejos. Una sola solicitud de usuario puede generar múltiples subagentes, llamar a herramientas externas, consultar almacenes de vectores y encadenar llamadas a LLM. Cuando algo sale mal —una respuesta lenta, un error inesperado, un conteo de tokens fuera de control—, la causa rara vez es obvia desde el exterior.
El monitoreo de agentes de IA le ayuda a abrir la caja negra:
- Rastree cada paso de un workflow agéntico desde el disparador inicial, a través de cada invocación de agente y herramienta, hasta la respuesta final.
- Identifique la latencia en agentes y herramientas individuales para saber exactamente dónde se consume el tiempo.
- Detecte errores tempranamente mostrando qué agente o herramienta en la cadena causó una falla.
- Rastree el consumo de tokens a nivel de agente para comprender los factores de costo en workflows complejos.
Visión general del rendimiento del agente
Una vez que su aplicación agéntica reporte datos, puede monitorear el rendimiento del agente desde la página de respuestas de IA. Las métricas relacionadas con el agente se muestran junto con sus datos de IA existentes para que pueda ver el panorama completo en un solo lugar.
Los indicadores clave de rendimiento disponibles para los agentes incluyen:
- Latencia: Tiempo de respuesta de extremo a extremo para cada invocación de agente, lo que le ayuda a identificar agentes lentos en un pipeline de varios pasos.
- Tasa de errores: La frecuencia con la que un agente o herramienta devuelve un error, para que pueda clasificar las fallas rápidamente.
- Uso de tokens: Conteos de tokens desglosados a nivel de agente, lo que le brinda una visión granular de la asignación de costos en workflows complejos.
Cada línea en la tabla de Respuestas representa una traza. Al hacer clic en una línea de la tabla, podrá profundizar en la traza, donde podrá ver la cascada y el mapa de entidades.
Agentes de IA en el mapa de entidades
New Relic agrega agentes de IA y herramientas de IA como entidades de primera clase en el mapa de entidades. Esto significa que puede ver su aplicación agéntica como un gráfico visual:
- Los agentes aparecen como nodos distintos, mostrando cómo se relacionan con los servicios, modelos y herramientas con los que interactúan.
- Las herramientas de IA aparecen como nodos conectados, lo que ilustra qué agentes invocan qué herramientas y en qué orden.
- Las relaciones entre agentes —como un agente que delega trabajo a un subagente— se representan como aristas dirigidas, lo que hace que los patrones de orquestación sean fáciles de entender de un vistazo.
Cascada de trazas del agente
La vista más detallada de la ejecución agéntica es la cascada de trazas. Los agentes de IA y las herramientas de IA están totalmente integrados en la vista de cascada de trazas existente, lo que le proporciona un desglose unificado, span por span, de cada paso de un workflow.
Cada fila en la cascada representa un solo span. Esto incluye las invocaciones de agentes y herramientas.
Solución de problemas con la cascada
La cascada de trazas es su herramienta principal para solucionar problemas en pipelines agénticos complejos:
- Los errores se resaltan en rojo para que pueda detectar de inmediato qué agente o herramienta de la cadena causó una falla, sin tener que rastrear manualmente los logs.
- Los spans de larga duración son visualmente evidentes por el ancho de la cascada, permitiéndole identificar qué paso es responsable de la latencia de extremo a extremo.
- Se puede acceder a los detalles del span al seleccionar cualquier fila. El panel de detalles muestra los atributos del span, los mensajes de error y las entradas y salidas para esa llamada de agente o herramienta.
¿Que sigue?
Ahora que entiende cómo monitorear agentes de IA, explore estos temas relacionados:
- Aprenda a ver datos de respuesta de IA para sus aplicaciones impulsadas por IA
- Descubra cómo personalizar el monitoreo de IA para adaptarse a sus necesidades específicas
- Obtenga más información sobre los requisitos de compatibilidad para el monitoreo de IA