Verifica del modello con un'attività di rilevamento delle versioni di prova

Se desideri verificare o migliorare la qualità del tuo modello, puoi eseguire un'attività di rilevamento di prova. Un'attività di rilevamento di prova rileva le anomalie nelle nuove immagini fornite.

Puoi verificare i risultati del rilevamento e aggiungere le immagini verificate al tuo set di dati. Se disponi di set di dati di addestramento e test separati, le immagini verificate vengono aggiunte al set di dati di addestramento.

Puoi verificare le immagini dal computer locale o quelle che si trovano in un bucket Amazon S3. Se desideri aggiungere immagini verificate al set di dati, le immagini che si trovano in un bucket S3 devono trovarsi nello stesso bucket S3 delle immagini nel set di dati.

Nota

Per eseguire un'attività di rilevamento delle versioni di prova, assicurati che il bucket S3 abbia abilitato il controllo delle versioni. Per ulteriori informazioni consulta Uso del controllo Versioni multiple. Il bucket della console viene creato con il controllo delle versioni abilitato.

Per impostazione predefinita, le immagini sono crittografate con una chiave che AWS possiede e gestisce. Puoi anche scegliere di utilizzare la tua chiave AWS Key Management Service (KMS). Per ulteriori informazioni consulta Concetti relativi a AWS Key Management Service.

Esecuzione di un'attività di rilevamento delle prove

Eseguire la procedura seguente per eseguire un'attività di rilevamento della prova.

Per eseguire un rilevamento della versione di prova (console)

1. Apri la console Amazon Lookout for Vision all'indirizzo https://console.aws.amazon.com/lookoutvision/.

2. Scegliere Inizia.

3. Nel pannello di navigazione a sinistra, scegliere Progetti.

4. Nella vista Progetti, scegli il progetto contenente la versione del modello che desideri visualizzare.

5. Nel pannello di navigazione a sinistra, sotto il nome del progetto, scegliere Rilevamenti di prova.

6. Nella vista dei rilevamenti delle versioni di prova, scegli Esegui il rilevamento della versione di prova.

7. Nella pagina Esegui il rilevamento delle versioni di prova, inserisci un nome per l'attività di rilevamento delle versioni di prova in Nome attività.

8. In Scegli modello, scegli la versione di quel modello che desideri utilizzare.

9. Importa le immagini in base alla fonte delle immagini come segue:

   • Se stai importando le immagini sorgente da un bucket Amazon S3, inserisci l'URI S3.

     Suggerimento

     Se stai usando le immagini di esempio Getting Started, usa la cartella extra_images. L'URI Amazon S3 ès3://your bucket/circuitboard/extra_images.

   • Se stai caricando immagini dal tuo computer, aggiungile dopo aver scelto Rileva anomalie.

10. (Facoltativo) Se desideri utilizzare la tua chiave di crittografia AWS KMS, procedi come segue:

    1. Per la crittografia dei dati delle immagini, scegli Personalizza le impostazioni di crittografia (avanzate).

    2. In encryption.aws_kms_key, immetti l'Amazon Resource Name (ARN) della chiavi o scegli una chiave AWS KMS esistente. Per creare una nuova chiave, scegli Crea una chiave AWS IMS.

11. Scegli Rileva anomalie e quindi scegli Esegui il rilevamento della versione di prova per avviare l'attività di rilevamento della versione di prova.

12. Controlla lo stato attuale nella visualizzazione dei rilevamenti delle prove. Il completamento del rilevamento della prova potrebbe richiedere un po' di tempo.

Verifica dei risultati del rilevamento delle sperimentazioni

La verifica dei risultati di una sperimentazione può aiutarti a migliorare il tuo modello.

Se le metriche delle prestazioni sono scadenti, migliora il modello eseguendo un rilevamento di prova e quindi aggiungi immagini verificate al set di dati (set di dati di addestramento, se disponi di set di dati separati).

Se le metriche prestazionali del modello sono buone, ma i risultati di una prova di rilevamento sono scadenti, puoi migliorare il tuo modello aggiungendo immagini verificate al set di dati (set di dati di addestramento). Se disponi di un set di dati di test separato, considera l'aggiunta di altre immagini al set di dati di test.

Dopo aver aggiunto immagini verificate al set di dati, riaddestrate e rivalutate il modello. Per ulteriori informazioni, consulta Addestrare il modello.

Per verificare i risultati di una sperimentazione

1. Apri la console Amazon Lookout for Vision all'indirizzo https://console.aws.amazon.com/lookoutvision/.

2. Nel pannello di navigazione a sinistra, scegliere Progetti.

3. Nella pagina Progetti, scegli il progetto che desideri usare. Viene visualizzata la dashboard del progetto.

4. Nel pannello di navigazione a sinistra, seleziona Rilevamenti di prova.

5. Scegli il rilevamento della prova che desideri verificare.

6. Nella pagina di rilevamento delle versioni di prova, scegli Verifica le previsioni della macchina.

7. Scegli Seleziona tutte le immagini in questa pagina.

8. Se le previsioni sono corrette, scegli Verifica come corrette. Altrimenti, scegli Verifica come errato. Il punteggio di affidabilità della previsione e della previsione è mostrato sotto ogni immagine.

9. Per modificare l'etichetta di un'immagine, procedi nel seguente modo:

   1. Scegli Corretto o Non corretto sotto l'immagine.

   2. Se non riesci a determinare l'etichetta corretta per un'immagine, ingrandisci l'immagine scegliendo l'immagine nella galleria.

   Nota

   Puoi filtrare le etichette delle immagini scegliendo l'etichetta o lo stato dell'etichetta desiderata nella sezione Filtri. Puoi ordinare in base al punteggio di confidenza nella sezione Opzioni di ordinamento.

10. Se il tuo modello è un modello di segmentazione e la maschera o l'etichetta di anomalia per un'immagine è sbagliata, scegli Area anomala sotto l'immagine e apri lo strumento di annotazione. Aggiorna le informazioni sulla segmentazione eseguendoCorrezione delle etichette di segmentazione con lo strumento di annotazione.

11. Se necessario, ripeti i passaggi 7-10 su ogni pagina fino a quando tutte le immagini non sono state verificate.

12. Scegli Aggiungi immagini verificate al set di dati. Se disponi di set di dati separati, le immagini vengono aggiunte al set di dati di addestramento.

13. Riqualifica il tuo modello. Per ulteriori informazioni, consulta Addestrare il modello.

Correzione delle etichette di segmentazione con lo strumento di annotazione

Si utilizza lo strumento di annotazione per segmentare un'immagine contrassegnando le aree anomale con una maschera.

Per correggere le etichette di segmentazione di un'immagine con lo strumento di annotazione

1. Apri lo strumento di annotazione selezionando l'area anomala sotto un'immagine nella galleria del set di dati.

2. Se l'etichetta di anomalia per una maschera non è corretta, scegli la maschera e quindi scegli l'etichetta di anomalia corretta in Etichette di anomalia. Se necessario, scegli Aggiungi etichetta di anomalia per aggiungere una nuova etichetta di anomalia.

3. Se la maschera non è corretta, scegli uno strumento di disegno nella parte inferiore della pagina e disegna maschere che coprano bene le aree anomale per l'etichetta dell'anomalia. L'immagine seguente è un esempio di maschera che copre perfettamente un'anomalia.

   

   Di seguito è riportato un esempio di maschera scadente che non copre bene un'anomalia.

   

4. Se hai altre immagini da correggere, scegli Avanti e ripeti i passaggi 2 e 3.

5. Scegli Invia e chiudi per completare l'aggiornamento delle immagini.