Observability Dashboard
Observability Dashboard允许您仔细检查Copilot、Autopilot Knowledge和Autopilot所采用的 AI 功能。 该仪表板提供了对生成式响应性能的全面洞察,使您能够确定需要改进的领域并优化您的作。
Copilot
Observability DashboardCopilot提供有关生成式响应、Copilot for Agents Queries和AutoSummary的信息。
-
单击应用程序选择器
,然后选择 Actions。
-
在 Actions 上,单击可观测性仪表板。
默认情况下,将显示Copilot仪表板。 它包含三个图表:
-
如果需要,请更新仪表板的日期范围,然后在渠道中选择交互类型。 选择查看语音交互、聊天交互或全部的详细信息。
-
单击运行查询。 这三个图表将更新以反映所需的日期和渠道。
查看有关GenAI性能的数据
生成式响应是在呼叫过程中自动生成的答案。
-
单击GenAI绩效标签以向下钻取到统计信息。 将显示三个图形:
-
随时间变化:显示一段时间内使用、修改、忽略或导致没有答案的答案的百分比。
-
按类别:按类别显示详细信息。
-
每次交互的平均 Kb :显示每天知识库交互的平均次数。
-
-
您可以自定义图表中显示的数据:
-
在“随时间变化”和“类别”图表中,您可以通过单击图例来切换不同答案状态的显示。
-
在随时间变化和类别图表中,单击绝对数字
或百分比
到在百分比和绝对数字之间切换。
-
在所有三个图形中,单击最大化以表格格式查看数据。
-
-
向下滚动以查看按类别分组的数据。 “类别视图”将知识库答案组织成不同的类别,从而提供结构化的分析方法。 每个类别均呈现:
-
知识库答案总量
-
平均遵守度分数
-
提供的链接和图像的平均数量
-
平均知识分数(知识库分数)
-
-
单击一个类别会显示特定查询及其详细信息,例如:
-
发送到知识库的查询
-
建议的知识库答案
-
坐席的实际响应
-
提供的链接和图像的数量
-
遵守度分数(建议响应与实际响应之间的相似度)
-
距交互开始的偏移量
对于每个查询,您可以:
-
单击播放交互
收听交互的音频(如果可用)。
-
单击查询的信息按钮。 在右侧的响应详细信息面板中,单击创建文章按钮,生成知识文章。 根据成绩单起草 AI 生成的文章。 您可以根据需要编辑文章,然后发布。
有关编辑和发布文章的完整信息,请参阅知识生成帮助。
-
-
您可以切换查看此数据的方式。 默认视图是按类别。 单击分组依据将分组从类别更改为以下分组之一:
-
主要联系
-
团队
-
技能
-
代理ID
数据将根据新的分组重新出现。
-
查看有关坐席查询的数据
坐席查詢显示有关根据坐席问题按需生成的知识库答案的信息。 它提供显示直接查询状态和遵守度分数的图表。
单击图表标题 坐席 查詢,向下钻取到统计数据。 第一个图表显示随时间变化的响应和无响应百分比。 第二个图表显示类别的详细信息。
您可以通过单击图例来切换不同答案状态的显示。
单击绝对数字
或百分比
,在百分比和绝对数字之间切换。
单击最大化
全屏查看图表。
向下滚动可查看按类别分组的数据。 “类别视图”将知识库答案组织成不同的类别,从而提供结构化的分析方法。 每个类别均呈现:
总计响应数量
无响应的数量和平均值
提供的链接和图像的平均数量
平均知识分数(知识库分配的分数)
单击类别会显示特定查询及其详细信息,例如:
发送到知识库的坐席查询
对坐席查询的应答
提供的链接和图像数量
响应的日期和时间
平均知识得分
查看有关AutoSummary查詢的数据
AutoSummary提供了汇总性能的全面视图。 您可以查看跟踪绩效随时间变化的图表,其中数据按意图和技能分组。 详细的表格显示建议的摘要和实际摘要,以及衡量准确性的遵守度分数。 要获得更全面的详细信息,您可以回放特定的交互,这将使您全面了解摘要是如何在真实对话中生成和使用起来的。
点击图表标题AutoSummary,深入查看统计信息。
第一张图显示了一段时间内使用的摘要的百分比。 摘要被标识为按以下方式之一使用:按原样、已修订、细微修订和忽略。
第二个图形按意图显示详细信息。
第三个图表按技能显示详细信息。
第四张图按团队显示详细信息。
您可以通过单击图例来切换不同答案状态的显示。
单击绝对数字
或百分比
,在百分比和绝对数字之间切换。
单击最大化
全屏查看图表。
向下滚动可查看按类别分组的数据。 “类别视图”将知识库答案组织成不同的类别,从而提供结构化的分析方法。 每个类别均呈现:
总计响应数量
无响应的数量和平均值
提供的链接和图像的平均数量
平均知识分数(知识库分配的分数)
单击类别会显示特定查询及其详细信息,例如:
发送到知识库的坐席查询
对坐席查询的响应
提供的链接和图像数量
响应的日期和时间
平均知识得分

作为 CX 领导者,Mark 希望利用Observability Dashboard来识别知识库中的知识差距。 他注意到许多知识库建议被修改或忽略。 Mark 单击知识库答案,以便按类别查看数据。 他重点关注平均遵守度分数较低的类别,这指示建议与实际响应之间的偏差。 通过扩展计费和付款等低分类别,Mark 发现对有关付款计划和退款政策的查询的遵守度较低,这表明这些方面存在知识差距。
通过这些Observability Dashboard,Mark 可以确定需要知识库增强的主题。 然后,他可以与知识库团队合作解决这些差距,提高建议的质量,从而更好地与客户互动。
Autopilot Knowledge
Observability DashboardAutopilot Knowledge显示有关自动化系统处理客户问题的能力的数据。 您将看到一个显示随时间变化的绩效趋势的图表。 这使您可以每天、每周或每月跟踪变化。
-
单击应用程序选择器
,然后选择 Actions。
-
在Actions上,单击Observability Dashboard。
-
单击 Autopilot Knowledge 选项卡。
-
为仪表板设置所需的日期范围,然后单击 运行查询。
-
单击GenAI绩效标签可查看有关响应的详细图表:
-
随时间变化图:跟踪成功响应和无响应的数量。
-
按类别图:确定优势和劣势领域,按类别分组。
您可以自定义图表中数据的外观:
-
要在百分比和绝对数字之间切换,请单击绝对数字
或百分比
。
-
要全屏查看图表,请单击最大化
。
-
要切换不同答案状态的显示,请单击图表中的响应或 无响应 图例。
-
-
在图表下方向下滚动,查看按意图分组的数据。 “意图”视图将摘要组织为不同的类别,提供结构化的分析方法。 每个意图均表示:
-
摘要的意图
-
摘要的数量和平均值
-
平均遵守度和分配的分数
-
-
要查看特定查询及其详细信息,请单击类别,例如:
-
建议摘要
-
实际摘要
-
遵守百分比和状态
-
摘要的日期和时间
-
Autopilot
Observability DashboardAutopilot显示了您的知识库处理客户问题的能力。 使用此仪表板查找可以向知识库添加更多文章或自定义文章以更好地回答客户问题的区域。
-
单击应用程序选择器
,然后选择 Actions。
-
在Actions上,单击Observability Dashboard。
-
单击 Autopilot 选项卡。
-
为仪表板设置所需的日期范围,然后单击运行查询。
-
单击GenAI绩效标签可查看有关在指定时间段内提出的问题和提供的文章的详细信息。
将显示两个图形:
-
随时间变化 graph:显示一段时间内成功响应和未响应的数量。 响应指示向用户显示文章。 无响应表示未找到匹配的文章。
-
按类别图:按类别显示成功响应和未响应的数量。
您可以自定义图表中数据的外观:
-
要在百分比和绝对数字之间切换,请单击绝对数字
或百分比
。
-
要全屏查看图表,请单击最大化
。
-
要切换不同答案状态的显示,请单击图表中的响应或无响应图例。
-
-
在图形下方向下滚动以查看提供有关查询的详细信息的表。 查询按类别分组。
-
单击类别会显示特定查询和提供的响应。 使用它来确定知识库中可能缺少文章的区域。