校準報告
校準報告可協助您校準評估表格。在校準過程中,評估表格會被傳送給指定數量的使用者進行評估。校準報告會自動追蹤評估者之間的變異數,以及個別評估者表現。您可以對同一評估表格的不同版本運行報告,並查看各版本之間的變異數變化。
質量經理希望確保不同評估者在使用同一評估表單的不同版本時,能夠保持評分一致。透過執行校準報告,經理可以比較評估者分數、識別高變異數,並找出異常值。這有助於提升評分準確性,並維持評估標準。強化的篩選及視覺化選項可加快分析速度,並為評估者提供更具針對性的指導。
資料概覽
此預先建立的報表包括:
評估者校正
此小工具會根據評估者在所選時間框架內已完成校準的參與情況,顯示變異數最高的評估者。此小工具只包含已完成校準的資料,即所有評估者均在截止日期前完成其指派的校準評估的校準。
您可以在My Zone > 校正中的完成比率欄查看完成狀態。例如,如果校正已傳送給15位參與者,則所有15位參與者都必須完成校正,才能在此小工具中顯示資料。您可以在QM報告中存取不完整校正的資料。
此小工具上顯示的資訊有助於您查看:
-
評估者的分數在 ±5% 變異數範圍內,或在品質經理決定的百分比範圍內。
-
評估者對互動的評分準確性,以及評分有困難的評估者。
按一下 在新頁面開啟
,以前往My Zone中的校正,您可在當中查看更多校正詳情。
按一下選項
,然後按一下小工具上的設定,以篩選您想在每個小工具中查看的資料。
欄位描述
-
顯示名稱:指定小工具的名稱。
-
變異數臨界值:定義評估者於校準分數中變異數的臨界百分比。如評估者的變異數百分比高於絕對值,則會以橙色顯示。
-
日期範圍:定義日期範圍。 您可以從選項中進行選擇,例如今天、昨天、最近 7 天、最近 30 天、最近 90 天、上週、上個月和自訂範圍。
-
評估者:選取評估者的名稱。
品質經理可以查看哪些評估者在相關校準中的評分傾向高於或低於其同儕,從而判斷他們是否需要品質評分指導。
表格校正
此小工具可協助品質經理查看變異數最高的已完成校準表格。它僅展示已完全完成校準的資料。當所有已獲委派的評估者在指定期限內提交其評分時,該校準即視為完成。
您可以在My Zone > 校正下的完成比率欄查看完成狀態。例如,如果某項校正已傳送給15位參與者,則所有15位都必須完成該校正,相關資料才會顯示在此小工具中。
在此小工具上,高差異表明不同的評估者之間問題的評分存在不一致。 品質經理可以檢查評估者在評分時是否遇到困難,然後指導他們。 評分要求或表格上的問題,亦可根據此資訊進行修訂。
按一下在新頁面中開啟
,以前往My Zone中的校正,您可以在該處查看其他校正詳情。
按一下選項
,然後在小工具上按一下設定,以篩選您想在每個小工具中查看的資料。
欄位描述
-
顯示名稱:指定小工具的名稱。
-
變異數臨界值:定義表單校準分數中變異數的臨界百分比。如該表單的百分比變異數超過絕對值,則會以紅色顯示。
-
日期範圍:定義日期範圍。 您可以從選項中進行選擇,例如今天、昨天、最近 7 天、最近 30 天、最近 90 天、上週、上個月和自訂範圍。
-
表格名稱和表格版本:從下拉式清單中選取表格名稱和版本,其中亦會顯示表格的狀態。
透過此小工具,品質經理可以檢查表格中是否需要簡單而明確的評分要求,以協助評估者知道如何為每個問題評分。
表單詳細視圖
| 欄 | 描述 |
|---|---|
|
表格名稱 |
表格的名稱。 |
|
表格版本 |
表單的版本。 |
|
部分 |
表單的部分。 |
|
問題 |
表格的問題。 |
|
校準分數 |
問題的校準分數。
|
|
變異數 |
該問題的變異數。 |
評估者詳細檢視
| 欄 | 描述 |
|---|---|
|
表格名稱 |
表格的名稱。 |
|
表格版本 |
表單的版本。 |
|
部分 |
表單的部分。 |
|
問題 |
表格中的問題。 |
|
校準分數 |
評估者對該問題的校正分數。 If calibration is based off an evaluation, the report displays the evaluation score. If calibration is based off an interaction, the report displays the average calibration score across the evaluators. |
|
變異數 |
問題的評估者變異數。 0%—The evaluator scored the question the same as other evaluators.Negative percentage: The evaluator gave a lower score for the question than other evaluators.Positive percentage: The evaluator gave a higher score for the question than other evaluators. |
John Middleton 是 Classics, Inc. 的品質經理。 他想提升評估者表現。 他開啟校準報告,定義時間段,選取他想要分析的表格,然後選取他的團隊。 他在Report By欄位中選取Evaluator,以評估者篩選。 他注意到評估者 Lucy Steele 給出的答案與其他人差異很大。 他按一下Lucy的名稱,以取得有關Lucy已評核表格及問題的變異數的更多詳情。