作者:杨雨虹  历史版本:1  最后编辑:杨雨虹  更新时间:2025-05-21 17:35

概述

智能体监测可以监控、跟踪应用程序在生产环境中的性能,在数据分析仪表盘内分析生产环境中应用的使用成本、延迟、用户反馈、性能等指标,并通过持续调试、迭代不断改进应用程序。

数据分析

数据分析 内显示了用量、活跃用户数和 LLM 调用消耗等,这使得用户可以持续改进应用运营的效果、活跃度、经济性。

  • 全部会话数:反映用户与 AI 每天的互动总次数,每回答用户一个问题即计数一次。提示词编排和调试的会话不计入。

  • 活跃用户数:与 AI 有效互动,即有一问一答以上的唯一用户数。提示词编排和调试的会话不计入。

  • 平均会话互动数:反映每个会话用户的持续沟通次数。如果用户与 AI 问答了 10 轮,即为 10。该指标反映了用户粘性。仅在对话型应用提供。

  • Token 输出速度:每秒的 Token 输出数量,侧面反应模型的生成速率以及应用的使用频率。

  • 用户满意度:每 1000 条消息的点赞数。反应了用户对回答十分满意的比例。

  • 费用消耗:反映每日该应用请求语言模型的 Tokens 花费,用于成本控制。

  • 全部消息数:反映该 AI 应用每天的会话总次数,发起一次新的会话即计数一次,一个会话内可能包含多条消息的往来。提示词编排和调试的消息不计入。