使用試驗偵測任務來驗證您的模型

如果您要驗證或改善模型的品質，您可以執行試驗偵測工作。試驗偵測任務會偵測您提供的新映像中的異常情況。

您可以驗證偵測結果，並將已驗證的影像新增至資料集。如果您有個別的訓練和測試資料集，則已驗證的影像會新增至訓練資料集。

您可以從您的 Amazon S3 儲存貯體中，驗證本機電腦或 Amazon S3 儲存貯體中的映像。如果您想要將經過驗證的映像新增至資料集，位於 S3 儲存貯體中的映像檔必須與資料集中的映像位於相同的 S3 儲存貯體中。

注意

若要執行試用偵測任務，請確保您的 S3 儲存貯體已啟用版本控制。如需詳細資訊，請參閱使用版本控制。在啟用版本控制的情況下建立主控台值區。

根據預設，您的映像會使用 AWS 擁有和管理的金鑰加密。您還可以選擇使用自己的 AWS Key Management Service (KMS) 金鑰。如需詳細資訊，請參閱 AWS Key Management Service 概念。

執行試驗偵測工作

執行下列步驟以執行試用偵測工作。

執行試用偵測 (主控台)

1. 打開亞馬遜 Lookout for Vision 控制台 https://console.aws.amazon.com/lookoutvision/.

2. 選擇 Get started (開始使用)。

3. 在左側導覽窗格中，選擇 Project。

4. 在專案檢視中，選擇專案，內含您要檢視的模型版本。

5. 在左側導覽窗格中，選擇試用偵測。

6. 在試驗偵測檢視中，選擇 [執行試驗偵測]。

7. 在 [執行試驗偵測] 頁面上，於 [工作名稱] 中輸入試用偵測工作的名稱。

8. 在 「選擇模型」中，選擇您要使用的模型版本。

9. 根據圖像的來源導入圖像，如下所示：

   • 如果您要從 Amazon S3 儲存貯體匯入來源映像檔，請輸入 S3 URI。

     提示

     如果您使用的是入門範例影像，請使用 extra_images 資料夾。Amazon S3 URI 是s3://your bucket/circuitboard/extra_images。

   • 如果您要從電腦上傳影像，請在選擇「偵測異常」後新增影像。

10. (選擇性) 如果您想要使用自己的 AWS KMS 加密金鑰，請執行下列動作：

    1. 對於 [影像資料加密]，選擇 [自訂加密設定 (進階)]。

    2. 在加密 .aws_kms_key 中，輸入金鑰的亞馬遜資源名稱 (ARN)，或選擇現有的 AWS KMS 金鑰。若要建立新金鑰，請選擇建立 AWS IMS 金鑰。

11. 選擇 [偵測異常]，然後選擇 [執行試驗偵測] 以開始試用偵測工作。

12. 在試驗偵測檢視中檢查目前的狀態。試驗偵測可能需要一段時間才能完成。

驗證試驗檢測結果

驗證試驗偵測的結果可協助您改善模型。

如果效能指標不佳，請執行試用偵測來改善模型，然後將已驗證的影像新增至資料集 (如果您有個別的資料集，則訓練資料集)。

如果模型的效能指標良好，但試驗偵測的結果不佳，您可以透過將已驗證的影像新增至資料集 (訓練資料集) 來改善模型。如果您有個別的測試資料集，請考慮將更多影像新增至測試資料集。

將已驗證的影像新增至資料集後，請重新訓練並重新評估模型。如需詳細資訊，請參閱培訓您的模型。

驗證試驗偵測的結果

1. 打開亞馬遜 Lookout for Vision 控制台 https://console.aws.amazon.com/lookoutvision/.

2. 在左側導覽窗格中，選擇 Project。

3. 在專案頁面中，選擇您要使用的專案。顯示專案的儀表板。

4. 在左側導覽窗格中，選擇試用偵測。

5. 選擇您要驗證的試用偵測。

6. 在試驗偵測頁面上，選擇驗證機器預測。

7. 選擇 [選取此頁面上的所有影像]。

8. 如果預測正確，請選擇驗證為正確。否則，請選擇「驗證為不正確」。預測和預測信賴度分數會顯示在每張影像下方。

9. 如果需要變更影像的標，請執行下列動作：

   1. 選擇影像下方的「正確」或「錯誤」。

   2. 如果無法判斷影像的正確標籤，請在圖庫中選擇影像來放大影像。

   注意

   您可以在「篩選器」區段中選擇所需的標籤或標籤狀態來篩選影像標籤。您可以在 [排序選項] 區段中依信賴度分數排序。

10. 如果您的模型是分割模型，且影像的遮色片或異常標籤有誤，請選擇影像下的「異常」區域，然後開啟註解工具。通過執行更新分段信息使用註解工具修正分段標示。

11. 視需要在每頁上重複步驟 7-10，直到所有影像都已驗證完畢。

12. 選擇新增已驗證的影像至資料集。如果您有個別的資料集，影像會新增至訓練資料集。

13. 重新訓練您的模型 如需詳細資訊，請參閱培訓您的模型。

使用註解工具修正分段標示

您可以使用註解工具，透過使用遮色片標記異常區域來劃分影像。

使用註解工具修正影像的分段標示的步驟

1. 在資料集圖庫中選取影像下方的異常區域，以開啟註解工具。

2. 如果遮色片的異常標籤不正確，請選擇遮色片，然後在「異常」標籤下選擇正確的異常標籤。如有必要，請選擇「新增異常標籤」以新增異常標籤。

3. 如果遮色片不正確，請選擇頁面底部的繪圖工具，然後繪製緊密覆蓋異常標籤異常區域的遮色片。下列影像是緊密覆蓋異常的遮色片範例。

   

   以下是不能緊密覆蓋異常狀況的不良遮罩範例。

   

4. 如果您有更多要校正的影像，請選擇「下一步」，然後重複步驟 2 和 3。

5. 選擇「提交」並關閉以完成更新影像。