View a markdown version of this page

AI 代理性能控制面板 - Amazon Connect

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

AI 代理性能控制面板

您可以使用 AI 代理性能仪表板查看 AI 代理的性能,并获得有关 AI 代理和一段时间内的见解。

仪表板提供了一个查看汇总的 AI 代理性能的地方。使用控制面板查看您的 AI Agent 指标,例如调用次数、延迟和成功率。

启用控制面板访问权限

确保为用户分配了相应的安全配置文件权限:

访问指标 - 访问权限控制面板 - 访问权限。有关行为差异的信息,请参阅 分配在 Amazon Connect 中查看控制面板和报告的权限

代理应用程序- Connect Workspace AI 聊天控件权限:需要此权限才能访问 AI 代理性能控制面板。

该仪表板可在以下位置获得:分析和优化 > 分析仪表板 > AI 代理性能

指定“时间范围”和“对比”基准

使用时间范围筛选器指定要在仪表板中查看数据的日期和时间段。

默认情况下,控制面板显示上周的数据。您可以自定义时间范围,查看最近 15 分钟的数据或最多 3 个月的历史数据。

使用 “比较” 筛选器选择用于比较当前数据的时间段。这使您可以识别趋势并跟踪一段时间内的改进或问题。

自助服务 AI 性能摘要

本部分显示您的 AI 代理发起的自助服务交互的运行状况。它显示了按'自助服务'用例筛选的选定时间段内的以下关键指标:

  • 涉及人工智能的联系人

    人工智能代理在不涉及人工代理的情况下解决客户查询的处理的联系总数。

  • 活跃的 AI 代理

    唯一 AI 代理的总数,其中每个代理均通过其名称和版本的唯一组合进行标识。

  • 回复完成率

    成功响应传入请求的 AI 代理会话的百分比。

  • 移交率:

    由人工智能代理处理的被标记为需要额外支持的自助服务联系的百分比,包括但不限于人工代理。

  • 平均 人工智能对话转向

    支持人工智能的联系人的平均对话次数。

下图显示了自助服务 AI 性能摘要图表示例。

自助服务 AI 代理性能摘要图表。

AI 代理辅助性能摘要

此控件显示您的代理辅助交互的运行状况,其中 AI 为人工代理提供支持。它显示了按'代理协助'用例筛选的选定时间段内的以下关键指标。

  • 涉及人工智能的联系人

    AI Agents 协助人工代理解决客户查询的联系人总数。

  • 活跃的 AI 代理

    唯一 AI 代理的总数,其中每个代理均通过其名称和版本的唯一组合进行标识。

  • 回复完成率

    成功响应传入请求的 AI 代理会话的百分比。

  • 主动意图参与率

    人工代理点击的检测到的主动意图的百分比。

  • 平均 人工智能对话转向

    支持人工智能的联系人的平均对话次数。

  • 平均处理时间

    与 AI 代理互动的联系人的平均处理时间

下图显示了 AI 代理辅助性能摘要图表示例。

AI 代理辅助性能摘要图表。

按版本划分的 AI 代理图表

评估分数趋势图表上,您可以每隔 15 分钟、每天、每周或每月查看趋势,并与之前的时间段和资源基准进行比较。可用间隔取决于时间范围的选择。例如,对于每周的时间范围,您可以按每天和每周的间隔查看趋势。

除了页面筛选条件外,您还可以在评估表单和评估来源图表中添加筛选条件。

下图是评估分数趋势图表示例。

按版本划分的 AI 代理图表。

按调用成功率划分的 AI 代理

按调用成功率划分的 AI 代理图表显示每个 AI 代理的调用成功率。您可以直接从此图表中筛选特定 AI 代理、AI 代理类型、AI 用例或其他维度,从而进一步配置此小组件。

下图显示了按调用成功率排列的 AI 代理示例。

按调用成功率划分的 AI 代理图表。

知识库使用情况

此表提供了 AI 代理引用的知识库文章的深入视图。您可以按 AI 代理类型和 AI 代理行进行扩展,深入了解特定的知识库名称,以查看 AI 代理引用知识库的次数。

显示的指标:

  • 参考次数-AI 代理引用文章的次数。

下图显示了知识库使用表的示例。

知识库使用情况表。

按版本划分的 AI 提示

此表提供了 AI 提示性能的深入视图。您可以展开 AI 代理类型和提示类型行以深入了解特定的提示版本。要了解每个版本对整体提示类型性能的贡献,请查看每个提示版本行的各个指标。

该表显示了三个级别的性能指标:

  • AI 代理类型级别

    AI 代理类型的所有提示和版本的汇总指标

  • AI 提示类型等级

    特定 AI 提示类型的所有版本的汇总指标

  • AI 提示版本级别

    每个 AI 提示版本的单独性能指标

显示的指标:

  • AI 提示调用次数

    调用 AI 提示版本的总次数

  • AI 提示调用成功率

    成功执行的 AI 提示调用的百分比

  • 平均 AI 提示调用延迟

    AI 提示版本的平均调用延迟(以毫秒为单位)

除了使用页面筛选器外,您还可以在表格中添加针对特定 AI 代理、AI 提示、时间范围或其他维度的过滤器。

下图显示了按版本图表显示的 AI 提示示例。

AI 按版本成功率表进行提示。