共用方式為

檢視文字分類模型的評估和詳細資料

  • 發行項

模型完成定型之後，您可以檢視模型效能，並查看測試集中文件的預測類別。

注意

當您每次定型新模型時，使用 [自動從定型資料分割測試集] 選項可能會產生不同的模型評估結果，因為測試集是從資料隨機選取的。 若要確定每次定型模型時，都會在相同的測試集上計算評估，請務必在啟動定型作業時使用 [使用手動分割定型和測試資料] 選項，並在標記資料時定義您的「測試」文件。

必要條件

檢視模型評估之前，您需要：

如需詳細資訊，請參閱專案開發生命週期。

模型詳細資料

  1. 移至您在 Language Studio 中的專案頁面。

  2. 從畫面左側的功能表中，選取 [模型效能]。

  3. 在此頁面中，您只能檢視每個模型和模型到期日的成功定型模型 F1 分數。 您可以選取模型名稱，以取得其效能的詳細資料。

注意

未在測試集中標記或預測的類別，將不會是顯示結果的一部分。

  • 在此索引標籤中，您可以檢視模型的詳細資料，例如：F1 分數、精確度、召回率、定型作業的日期和時間、此定型作業中包含的定型時間和測試檔案總數。

    此螢幕擷取畫面顯示模型評估的概觀頁面。

  • 您也會看到如何改善模型的指引。 按一下 [檢視詳細資料] 時，側邊面板將會開啟，提供更多如何改善模型的指引。 在此範例中，這些類別的定型集中沒有足夠的資料。 此外，定型集中類別類型之間的區別不明顯，導致兩個類別彼此混淆。 按一下混淆的類別，您將會前往 [資料標籤] 頁面，以使用正確的類別來標記更多資料。

    螢幕擷取畫面：模型評估的指引頁面。

    深入瞭解模型效能概念中的模型指引和混淆矩陣。

載入或匯出模型資料

載入模型資料：

  1. 在 [模型評估] 頁面中選取任何模型。

  2. 選取 [載入模型資料] 按鈕。

  3. 確認您沒有必須在出現的視窗中擷取的任何未儲存變更，然後選取 [載入資料]。

  4. 等到模型資料完成載回至您的專案為止。 完成時，系統會將您重新導向回到 [結構描述設計] 頁面。

匯出模型資料：

  1. 在 [模型評估] 頁面中選取任何模型。

  2. 選取 [匯出模型資料] 按鈕。 等候模型的 JSON 快照集在本機下載。

刪除模型

若要在 Language Studio 內刪除模型：

  1. 從左側功能表中選取 [模型效能]。

  2. 選取您想要刪除的模型名稱，然後選取頂端功能表中的 [刪除]。

  3. 在出現的視窗中，選取 [確定]，刪除模型。

下一步

在您檢閱模型的效能表現時，請了解所使用的評估計量。 知道您的模型效能是否需要改善之後，您就可以開始改進模型。