View a markdown version of this page

CloudWatch Metriken für die Bias-Drift-Analyse - Amazon SageMaker KI

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

CloudWatch Metriken für die Bias-Drift-Analyse

Anmerkung

Amazon SageMaker Model Monitor steht neuen Kunden nicht mehr offen. Bestehende Kunden können den Service weiterhin wie gewohnt nutzen. AWS investiert weiterhin in Sicherheits- und Verfügbarkeitsverbesserungen für Model Monitor, wir planen jedoch nicht, neue Funktionen einzuführen. Weitere Informationen finden Sie unter Änderung der Verfügbarkeit von Amazon SageMaker Model Monitor.

In diesem Handbuch werden CloudWatch Metriken und ihre Eigenschaften vorgestellt, die Sie für die Bias-Drift-Analyse in SageMaker Clarify verwenden können. Bei der Überwachung der Verzerrungsabweichung werden sowohl Messwerte vor dem Training als auch Messwerte für Verzerrungen nach dem Training berechnet und im folgenden CloudWatch Namespace veröffentlicht:

  • Für Echtzeit-Endpunkte: aws/sagemaker/Endpoints/bias-metrics

  • Erstellen Sie Stapeltransformationsaufträge: aws/sagemaker/ModelMonitoring/bias-metrics

An den Namen der CloudWatch Metrik wird der Kurzname der Metrik angehängt. bias_metric

Dies bias_metric_CI ist beispielsweise die Bias-Metrik für das Klassenungleichgewicht (CI).

Anmerkung

+/- infinity wird als Fließkommazahl veröffentlicht, und Fehler +/- 2.348543e108, einschließlich Nullwerte, werden nicht veröffentlicht.

Jede Metrik hat die folgenden Eigenschaften:

  • Endpoint: Der Name des überwachten Endpunkts, falls zutreffend.

  • MonitoringSchedule: Der Name des Überwachungszeitplans.

  • BiasStage: Der Name der Phase, in der der Bias-Drift-Monitoring-Auftrag ausgeführt wird. Wählen Sie Pre-training oder Post-Training.

  • Label: Der Name der Zielfunktion, der von der Konfiguration label für die Analyse des Monitoring-Auftragesbereitgestellt wird.

  • LabelValue: Der Wert der Zielfunktion, der von der Konfiguration label_values_or_threshold für die Analyse des Monitoring-Auftrages bereitgestellt wird.

  • Facet: Der Name der Facette, der von der Konfigurationsfacette name_of_index für die Monitoring-Auftrag-Analyse bereitgestellt wird.

  • FacetValue: Der Wert der Facette, der von der Konfigurationsfacette für die Analyse von nvalue_or_thresholdÜberwachungsaufträgen bereitgestellt wird.

Um zu verhindern, dass die Monitoring-Jobs Metriken veröffentlichen, setzen Sie publish_cloudwatch_metrics auf Disabled in der Environment Map of Model Bias Auftragsdefinition auf.