Monitoraggio del lineage di Amazon SageMaker ML

Il Monitoraggio del lineage di Amazon SageMaker ML crea e archivia informazioni sulle fasi di un flusso di lavoro di machine learning (ML) dalla preparazione dei dati all'implementazione del modello. Con le informazioni di monitoraggio, puoi riprodurre le fasi del flusso di lavoro, monitorare il lineage del modello e del set di dati e stabilire standard di governance e audit del modello.

La funzionalità Monitoraggio del lineage di SageMaker AI funziona nel backend per tenere traccia di tutti i metadati associati ai flussi di lavoro di addestramento e implementazione dei modelli. Ciò include i processi di addestramento, i set di dati utilizzati, le pipeline, gli endpoint e i modelli effettivi. Puoi interrogare il servizio Lineage in qualsiasi momento per trovare gli artefatti esatti utilizzati per addestrare un modello. Utilizzando questi artefatti, è possibile ricreare lo stesso flusso di lavoro ML per riprodurre il modello, purché si abbia accesso allo stesso set di dati utilizzato. Un componente di prova tiene traccia del processo di addestramento. Questo componente di prova ha tutti i parametri utilizzati come parte del processo di addestramento. Se non è necessario eseguire nuovamente l'intero flusso di lavoro, è possibile riprodurre il processo di addestramento per ricavare lo stesso modello.

Con Monitoraggio del lineage di SageMaker AI, i Data Scientist e i creatori di modelli possono:

Il diagramma seguente mostra un esempio di grafo di lineage che Amazon SageMaker AI crea automaticamente in un flusso di lavoro di ML di addestramento e implementazione di modelli end-to-end.