View a markdown version of this page

Impostazione della raccolta di metriche Ray - Amazon SageMaker AI

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Impostazione della raccolta di metriche Ray

Per raccogliere le metriche di Ray, installa o aggiorna il componente aggiuntivo Observability e attiva le SageMaker HyperPod metriche di Ray. L'add-on implementa un raccoglitore con configurazione scrape per Ray head pod, worker pod e KubeRay operatore, in modo da non creare manualmente la configurazione scrape per cluster. Le metriche arrivano in Amazon Managed Service per Prometheus e vengono visualizzate in Amazon Managed Grafana.

Prerequisiti

  • L' KubeRay operatore installato sul tuo cluster. HyperPod Per ulteriori informazioni, consulta Installazione KubeRay su HyperPod Amazon EKS.

  • Il componente aggiuntivo Observability nella versione 1.0.6 o successiva. Le versioni precedenti funzionano, ma le metriche Ray non vengono visualizzate.

Attiva le metriche Ray

Nota

Ogni HyperPod cluster appena creato, con configurazione rapida o configurazione personalizzata nella console, ha le metriche Ray attivate per impostazione predefinita. Usa i seguenti passaggi per un cluster creato in un altro modo o per uno in cui le metriche Ray sono disattivate.

Per attivare le metriche Ray
  1. Apri il HyperPod cluster nella console, quindi vai alla configurazione del componente aggiuntivo Observability nella scheda Add-ons o Dashboard.

  2. Installa il componente aggiuntivo o aggiornalo se è già installato.

  3. Conferma che la casella di controllo Ray metrics sia selezionata. È selezionata per impostazione predefinita.

  4. Salvare la configurazione.

Importante

Se l'add-on Observability è già installato, aggiornalo alla versione 1.0.6 o successiva, quindi aggiorna le dashboard Grafana dalla console AI. SageMaker Le nuove metriche Ray e i pannelli della dashboard non vengono visualizzati finché sia l'add-on che le dashboard non vengono aggiornati.

Per aggiornare le dashboard, apri il cluster nella console SageMaker AI, scegli la scheda Dashboard e nella sezione HyperPod Osservabilità scegli Azioni, quindi Aggiorna dashboard. Conferma l'aggiornamento nella finestra di dialogo. L'aggiornamento sovrascrive le dashboard di Ray Core, Ray Data, Ray Train e Ray Serve, quindi copia prima tutte le personalizzazioni.

La finestra di dialogo Upgrade dashboard nella console SageMaker AI, che elenca le dashboard Ray Core, Ray Data, Ray Train e Ray Serve da aggiornare.

Per la configurazione generale del componente aggiuntivo e i passaggi della console, vedi e. Osservabilità Osservabilità per il SageMaker HyperPod cluster Amazon orchestrato da Amazon EKS

Verifica

Verifica che l'add-on riporti i Ray pod come obiettivi di scrape, quindi apri Grafana e conferma che una dashboard Ray mostri i dati per un cluster in esecuzione. Se una dashboard è vuota, conferma prima che il componente aggiuntivo sia nella versione 1.0.6 o successiva.