Observability Dashboard

Observability Dashboard允许您仔细检查CopilotAutopilot KnowledgeAutopilot所采用的 AI 功能。 该仪表板提供了对生成式响应性能的全面洞察,使您能够确定需要改进的领域并优化您的作。

Copilot

Observability DashboardCopilot提供有关生成式响应、Copilot for Agents Queries和AutoSummary的信息。

  1. 单击应用程序选择器 ,然后选择 Actions

  2. Actions 上,单击可观测性仪表板

    默认情况下,将显示Copilot仪表板。 它包含三个图表:

  3. 如果需要,请更新仪表板的日期范围,然后在渠道中选择交互类型。 选择查看语音交互、聊天交互或全部的详细信息。

  4. 单击运行查询。 这三个图表将更新以反映所需的日期和渠道。

查看有关GenAI性能的数据

生成式响应是在呼叫过程中自动生成的答案。

  1. 单击GenAI绩效标签以向下钻取到统计信息。 将显示三个图形:

    • 随时间变化:显示一段时间内使用、修改、忽略或导致没有答案的答案的百分比。

    • 按类别:按类别显示详细信息。

    • 每次交互的平均 Kb :显示每天知识库交互的平均次数。

  2. 您可以自定义图表中显示的数据:

    • 在“随时间变化”和“类别”图表中,您可以通过单击图例来切换不同答案状态的显示。

    • 在随时间变化和类别图表中,单击绝对数字 百分比 到在百分比和绝对数字之间切换。

    • 在所有三个图形中,单击最大化以表格格式查看数据。

  3. 向下滚动以查看按类别分组的数据。 “类别视图”将知识库答案组织成不同的类别,从而提供结构化的分析方法。 每个类别均呈现:

    • 知识库答案总量

    • 平均遵守度分数

    • 提供的链接和图像的平均数量

    • 平均知识分数(知识库分数)

  4. 单击一个类别会显示特定查询及其详细信息,例如:

    • 发送到知识库的查询

    • 建议的知识库答案

    • 坐席的实际响应

    • 提供的链接和图像的数量

    • 遵守度分数(建议响应与实际响应之间的相似度)

    • 距交互开始的偏移量

    对于每个查询,您可以:

    • 单击播放交互 收听交互的音频(如果可用)。

    • 单击查询的信息按钮。 在右侧的响应详细信息面板中,单击创建文章按钮,生成知识文章。 根据成绩单起草 AI 生成的文章。 您可以根据需要编辑文章,然后发布。

      有关编辑和发布文章的完整信息,请参阅知识生成帮助。

  5. 您可以切换查看此数据的方式。 默认视图是按类别。 单击分组依据将分组从类别更改为以下分组之一:

    • 主要联系

    • 团队

    • 技能

    • 代理ID

    数据将根据新的分组重新出现。

查看有关坐席查询的数据

坐席查詢显示有关根据坐席问题按需生成的知识库答案的信息。 它提供显示直接查询状态和遵守度分数的图表。

  1. 单击图表标题 坐席 查詢,向下钻取到统计数据。 第一个图表显示随时间变化的响应和无响应百分比。 第二个图表显示类别的详细信息。

  2. 您可以通过单击图例来切换不同答案状态的显示。

  3. 单击绝对数字 百分比 ,在百分比和绝对数字之间切换。

  4. 单击最大化 全屏查看图表。

  5. 向下滚动可查看按类别分组的数据。 “类别视图”将知识库答案组织成不同的类别,从而提供结构化的分析方法。 每个类别均呈现:

    • 总计响应数量

    • 无响应的数量和平均值

    • 提供的链接和图像的平均数量

    • 平均知识分数(知识库分配的分数)

  6. 单击类别会显示特定查询及其详细信息,例如:

    • 发送到知识库的坐席查询

    • 对坐席查询的应答

    • 提供的链接和图像数量

    • 响应的日期和时间

    • 平均知识得分

查看有关AutoSummary查詢的数据

AutoSummary提供了汇总性能的全面视图。 您可以查看跟踪绩效随时间变化的图表,其中数据按意图和技能分组。 详细的表格显示建议的摘要和实际摘要,以及衡量准确性的遵守度分数。 要获得更全面的详细信息,您可以回放特定的交互,这将使您全面了解摘要是如何在真实对话中生成和使用起来的。

  1. 点击图表标题AutoSummary,深入查看统计信息。

    • 第一张图显示了一段时间内使用的摘要的百分比。 摘要被标识为按以下方式之一使用:按原样、已修订、细微修订和忽略。

    • 第二个图形按意图显示详细信息。

    • 第三个图表按技能显示详细信息。

    • 第四张图按团队显示详细信息。

    您可以通过单击图例来切换不同答案状态的显示。

  2. 单击绝对数字 百分比 ,在百分比和绝对数字之间切换。

  3. 单击最大化 全屏查看图表。

  4. 向下滚动可查看按类别分组的数据。 “类别视图”将知识库答案组织成不同的类别,从而提供结构化的分析方法。 每个类别均呈现:

    • 总计响应数量

    • 无响应的数量和平均值

    • 提供的链接和图像的平均数量

    • 平均知识分数(知识库分配的分数)

  5. 单击类别会显示特定查询及其详细信息,例如:

    • 发送到知识库的坐席查询

    • 对坐席查询的响应

    • 提供的链接和图像数量

    • 响应的日期和时间

    • 平均知识得分

Autopilot Knowledge

Observability DashboardAutopilot Knowledge显示有关自动化系统处理客户问题的能力的数据。 您将看到一个显示随时间变化的绩效趋势的图表。 这使您可以每天、每周或每月跟踪变化。

  1. 单击应用程序选择器 ,然后选择 Actions

  2. Actions上,单击Observability Dashboard

  3. 单击 Autopilot Knowledge 选项卡。

  4. 为仪表板设置所需的日期范围,然后单击 运行查询

  5. 单击GenAI绩效标签可查看有关响应的详细图表:

    • 随时间变化图:跟踪成功响应和无响应的数量。

    • 按类别图:确定优势和劣势领域,按类别分组。

    您可以自定义图表中数据的外观:

    • 要在百分比和绝对数字之间切换,请单击绝对数字 百分比

    • 要全屏查看图表,请单击最大化

    • 要切换不同答案状态的显示,请单击图表中的响应无响应 图例。

  6. 在图表下方向下滚动,查看按意图分组的数据。 “意图”视图将摘要组织为不同的类别,提供结构化的分析方法。 每个意图均表示:

    • 摘要的意图

    • 摘要的数量和平均值

    • 平均遵守度和分配的分数

  7. 要查看特定查询及其详细信息,请单击类别,例如:

    • 建议摘要

    • 实际摘要

    • 遵守百分比和状态

    • 摘要的日期和时间

Autopilot

Observability DashboardAutopilot显示了您的知识库处理客户问题的能力。 使用此仪表板查找可以向知识库添加更多文章或自定义文章以更好地回答客户问题的区域。

  1. 单击应用程序选择器 ,然后选择 Actions

  2. Actions上,单击Observability Dashboard

  3. 单击 Autopilot 选项卡。

  4. 为仪表板设置所需的日期范围,然后单击运行查询

  5. 单击GenAI绩效标签可查看有关在指定时间段内提出的问题和提供的文章的详细信息。

    将显示两个图形:

    • 随时间变化 graph:显示一段时间内成功响应和未响应的数量。 响应指示向用户显示文章。 无响应表示未找到匹配的文章。

    • 按类别:按类别显示成功响应和未响应的数量。

    您可以自定义图表中数据的外观:

    • 要在百分比和绝对数字之间切换,请单击绝对数字 百分比

    • 要全屏查看图表,请单击最大化

    • 要切换不同答案状态的显示,请单击图表中的响应无响应图例。

  6. 在图形下方向下滚动以查看提供有关查询的详细信息的表。 查询按类别分组。

  7. 单击类别会显示特定查询和提供的响应。 使用它来确定知识库中可能缺少文章的区域。