View a markdown version of this page

Configura CloudWatch l'agente per Amazon EMR 7.1.0 - Amazon EMR

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Configura CloudWatch l'agente per Amazon EMR 7.1.0

A partire da Amazon EMR 7.1.0, puoi configurare l' CloudWatch agente Amazon per utilizzare metriche di sistema aggiuntive, aggiungere metriche delle applicazioni e modificare la destinazione delle metriche utilizzando l'API di configurazione Amazon EMR. Per ulteriori informazioni su come utilizzare l'API di configurazione EMR per configurare le applicazioni del cluster, consulta Configure applications. https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps.html

Nota

7.1.0 supporta solo il tipo di riconfigurazione. OVERWRITE Per ulteriori informazioni sui tipi di riconfigurazione, vedere Considerazioni sulla riconfigurazione di un gruppo di istanze.

Schema di configurazione

emr-metricsha le seguenti classificazioni:

  • emr-system-metrics— configura le metriche di sistema, come CPU, disco e memoria.

  • emr-hadoop-hdfs-datanode-metrics— configurare le metriche Hadoop DataNode JMX

  • emr-hadoop-hdfs-namenode-metrics— configurare le metriche Hadoop JMX NameNode

  • emr-hadoop-yarn-nodemanager-metrics— configurare le metriche Yarn JMX NodeManager

  • emr-hadoop-yarn-resourcemanager-metrics— configurare le metriche Yarn JMX ResourceManager

  • emr-hbase-master-metrics— configurare le metriche JMX di HBase Master

  • emr-hbase-region-server-metrics— configurare le metriche JMX di HBase Region Server

  • emr-hbase-rest-server-metrics— configurare le metriche JMX di HBase REST Server

  • emr-hbase-thrift-server-metrics— configurare le metriche JMX di HBase Thrift Server

Le tabelle seguenti descrivono le proprietà e le configurazioni disponibili per tutte le classificazioni.

proprietà emr-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics_destination Facoltativo Determina se le metriche del cluster vengono pubblicate su Amazon CloudWatch o Amazon Managed Service for Prometheus. «CLOUDWATCH» «CLOUDWATCH», «PROMETEO» Questa proprietà non fa distinzione tra maiuscole e minuscole. Ad esempio, «Cloudwatch» è uguale a «CLOUDWATCH».
prometheus_endpoint Facoltativo Se metrics_destination è impostata su «PROMETHEUS», questa proprietà configura l' CloudWatch agente per inviare le metriche all'endpoint di scrittura remota Amazon Managed Service for Prometheus fornito. N/A Qualsiasi URL di scrittura remota valido per Amazon Managed Service for Prometheus. Il formato dell'URL di scrittura remota è
https://aps-workspaces.<region>.amazonaws.com/workspaces/<workspace_id>/api/v1/remote_write
Questo campo è obbligatorio se metrics_destination è impostato su «PROMETHEUS». Il provisioning fallirà se non si fornisce una chiave o se il valore è una stringa vuota.

proprietà emr-system-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics_collection_interval Facoltativo Con quale frequenza in secondi le metriche vengono raccolte e pubblicate dall'agente. CloudWatch «60" Una stringa che specifica il numero di secondi. Accetta solo numeri interi. È possibile sostituire questa proprietà con la metrics_collection_interval proprietà dei singoli gruppi di metriche.

configurazioni emr-system-metrics

cpu
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche della CPU che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche CPU validi con o senza il cpu_ prefisso, ad esempio e. usage_active cpu_time_idle Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica della CPU.
metrics_collection_interval Facoltativo Con quale frequenza in secondi l'agente deve raccogliere e pubblicare le metriche della CPU. Il valore del globalemetrics_collection_interval. Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore sostituisce la metrics_collection_interval proprietà globale solo per le metriche della CPU.
drop_original_metrics Facoltativo Elenco delle metriche della CPU per le quali non pubblicare metriche non aggregate. Nessuna metrica CPU non aggregata pubblicata. Un elenco separato da virgole di metriche della CPU specificate anche nella proprietà metrics. Una stringa vuota indica la pubblicazione di tutte le metriche della CPU. L' CloudWatch agente aggrega tutte le metriche in base all'ID del cluster, all'ID dell'istanza, al tipo di nodo e al nome del servizio. Per impostazione predefinita, l' CloudWatch agente non pubblica le metriche per risorsa per le metriche con più risorse.
resources Facoltativo Determina se l'agente pubblicherà le metriche per core. "*" «*» abilita le metriche per core. «» disabilita le metriche per core. L' CloudWatch agente pubblica solo le metriche per core per le metriche della CPU che non vengono inserite. drop_original_metrics
disk
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche del disco che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche del disco validi con o senza il disk_ prefisso, ad esempio e. disk_total used_percent Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica del disco.
metrics_collection_interval Facoltativo Con quale frequenza, in secondi, l'agente deve raccogliere e pubblicare le metriche del disco. Il valore del globalemetrics_collection_interval. Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore sostituisce la metrics_collection_interval proprietà globale solo per le metriche del disco.
drop_original_metrics Facoltativo Elenco delle metriche del disco per le quali non pubblicare metriche non aggregate. Nessuna metrica del disco non aggregata pubblicata. Un elenco separato da virgole di metriche del disco specificate anche nella proprietà metrics. Una stringa vuota indica la pubblicazione di tutte le metriche del disco. L' CloudWatch agente aggrega tutte le metriche in base all'ID del cluster, all'ID dell'istanza, al tipo di nodo e al nome del servizio. Per impostazione predefinita, l' CloudWatch agente non pubblica le metriche per risorsa per le metriche con più risorse.
resources Facoltativo Determina se l'agente pubblicherà le metriche per punto di montaggio. "*" «*» indica tutti i punti di montaggio, «» significa nessun punto di montaggio o un elenco di punti di montaggio separato da virgole. Ad esempio, "/,/emr". L' CloudWatch agente pubblica solo le metriche per punto di montaggio per le metriche del disco che non vengono inserite. drop_original_metrics
diskio
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche I/O del disco che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche I/O del disco validi con o senza prefisso, ad esempio e. diskio_ diskio_reads writes Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica di I/O del disco.
metrics_collection_interval Facoltativo Con quale frequenza, in secondi, l'agente deve raccogliere e pubblicare le metriche I/O del disco. Il valore del globalemetrics_collection_interval. Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore ha la precedenza sulla metrics_collection_interval proprietà globale solo per le metriche I/O del disco.
drop_original_metrics Facoltativo Elenco delle metriche I/O del disco per le quali non pubblicare metriche non aggregate. Nessuna metrica I/O del disco non aggregata pubblicata. Un elenco separato da virgole di metriche I/O del disco specificate anche nella proprietà metrics. Una stringa vuota indica la pubblicazione di tutte le metriche I/O del disco. L' CloudWatch agente aggrega tutte le metriche in base all'ID del cluster, all'ID dell'istanza, al tipo di nodo e al nome del servizio. Per impostazione predefinita, l' CloudWatch agente non pubblica le metriche per risorsa per le metriche con più risorse.
resources Facoltativo Determina se l'agente pubblicherà le metriche per dispositivo. "*" «*» indica tutti i dispositivi di archiviazione, «» significa nessun dispositivo di archiviazione o un elenco di nomi di dispositivi separati da virgole. Ad esempio, "nvme0n1,nvme1n1". L' CloudWatch agente pubblica solo le metriche relative ai parametri I/O del disco che non vengono inserite. drop_original_metrics
mem
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche di memoria che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche di memoria validi con o senza il mem_ prefisso, ad esempio e. mem_available available_percent Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica di memoria.
metrics_collection_interval Facoltativo Con quale frequenza in secondi l'agente deve raccogliere e pubblicare le metriche di memoria. Il valore del globalemetrics_collection_interval. Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore sostituisce la metrics_collection_interval proprietà globale solo per le metriche di memoria.
net
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche di rete che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche di rete validi con o senza il net_ prefisso, ad esempio e. net_packets_sent packets_recv Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica di rete.
metrics_collection_interval Facoltativo Con quale frequenza in secondi l'agente deve raccogliere e pubblicare le metriche di rete. Il valore del globalemetrics_collection_interval. Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore sostituisce la metrics_collection_interval proprietà globale solo per le metriche di rete.
drop_original_metrics Facoltativo Elenco delle metriche di rete per le quali non pubblicare metriche non aggregate. Nessuna metrica di rete non aggregata pubblicata. Un elenco separato da virgole di metriche di rete specificate anche nella proprietà metrics. Una stringa vuota indica la pubblicazione di tutte le metriche di rete. L' CloudWatch agente aggrega tutte le metriche in base all'ID del cluster, all'ID dell'istanza, al tipo di nodo e al nome del servizio. Per impostazione predefinita, l' CloudWatch agente non pubblica le metriche per risorsa per le metriche con più risorse.
resources Facoltativo Determina se l'agente pubblicherà le metriche per interfaccia. "*" «*» indica tutte le interfacce di rete, «» significa nessuna interfaccia di rete o un elenco di nomi di interfacce separati da virgole. Ad esempio, "eth0,eth1". L' CloudWatch agente pubblica solo le metriche per interfaccia per le metriche di rete che non vengono inserite. drop_original_metrics
netstat
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche delle statistiche di rete che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche di memoria validi con o senza il netstat_ prefisso, ad esempio e. tcp_listen netstat_udp_socket Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica statistica di rete.
metrics_collection_interval Facoltativo Con quale frequenza in secondi l'agente deve raccogliere e pubblicare le metriche statistiche di rete. Il valore del globale. metrics_collection_interval Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore ha la precedenza sulla metrics_collection_interval proprietà globale solo per le metriche statistiche di rete.
processes
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche di processo che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche di memoria validi con o senza il processes_ prefisso, ad esempio e. processes_running total Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica di processo.
metrics_collection_interval Facoltativo Con quale frequenza in secondi l'agente deve raccogliere e pubblicare le metriche dei processi di sistema. Il valore del globalemetrics_collection_interval. Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore sostituisce la metrics_collection_interval proprietà globale solo per le metriche dei processi di sistema.
swap
Proprietà Richiesto Description Valore predefinito Valori possibili Note
metrics Facoltativo L'elenco delle metriche di swap che l'agente deve raccogliere. Vedi Metriche predefinite per l' CloudWatch agente con Amazon EMR Un elenco separato da virgole di nomi di metriche di memoria validi con o senza il swap_ prefisso, ad esempio e. swap_free used_percent Vedi Metriche raccolte dall'agente per le metriche valide. CloudWatch Specificare una stringa vuota significa non pubblicare alcuna metrica di swap.
metrics_collection_interval Facoltativo Con quale frequenza in secondi l'agente deve raccogliere e pubblicare le metriche di swap. Il valore del globale. metrics_collection_interval Una stringa che specifica il numero di secondi. Accetta solo numeri interi. Questo valore sostituisce la metrics_collection_interval proprietà globale solo per le metriche di scambio.

proprietà emr-hadoop-hdfs-datanode-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=DataNode,name=DataNodeActivity Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, BlocksCached,BlocksRead.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche di Hadoop. DataNode «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hadoop-hdfs-namenode-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=NameNode,name=FSNamesystem Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, BlockCapacity,CapacityUsedGB.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche di Hadoop. NameNode «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hadoop-yarn-nodemanager-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=NodeManager,name=NodeManagerMetrics Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, MaxCapacity,AllocatedGB.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche di Hadoop YARN. NodeManager «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hadoop-yarn-resourcemanager-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=ResourceManager,name=PartitionQueueMetrics Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, MaxCapacity,MaxCapacityVCores.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche di Hadoop YARN. ResourceManager «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hbase-master-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio CloudWatch . Hadoop:service=HBase,name=Master,sub=AssignmentManager Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, AssignFailedCount,AssignSubmittedCount.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche HBase Master. «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hbase-region-server-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=HBase,name=RegionServer,sub=IPC Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, numActiveHandler,numActivePriorityHandler.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche di HBase Region Server. «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hbase-rest-server-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=HBase,name=REST Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, successfulPut,successfulScanCount.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche di HBase Rest Server. «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

proprietà emr-hbase-thrift-server-metrics

Proprietà Richiesto Description Valore predefinito Valori possibili
<custom_bean_name> Facoltativo N/A L'MBean da cui l'agente deve raccogliere le metriche, ad esempio. CloudWatch Hadoop:service=HBase,name=Thrift,sub=ThriftOne Puoi trovare esempi di nomi MBean e le relative metriche nei file JMX YAML di esempio per Amazon EMR release 7.0. Una stringa contenente l'elenco delimitato da virgole delle metriche associate all'MBean. Ad esempio, BatchGet_max,BatchGet_mean.
otel.metric.export.interval Facoltativo Con quale frequenza, in millisecondi, raccogliere le metriche del server HBase Thrift. «60000" Una stringa che specifica il numero di millisecondi. Accetta solo numeri interi.

Metriche di sistema, esempi di configurazioni

L'esempio seguente dimostra come configurare l' CloudWatch agente per interrompere l'esportazione di tutte le metriche di sistema.

[ { "Classification": "emr-metrics", "Properties": {}, "Configurations": [ { "Classification": "emr-system-metrics", "Properties": {}, "Configurations": [] } ] } ]

L'esempio seguente configura l' CloudWatch agente per esportare le metriche di sistema predefinite. Questa operazione è un modo rapido per reimpostare l'agente all'esportazione delle metriche di sistema predefinite solo se le metriche di sistema sono già state riconfigurate almeno una volta. Questa reimpostazione rimuove anche tutte le metriche delle applicazioni riconfigurate in precedenza.

[ { "Classification": "emr-metrics", "Properties": {}, "Configurations": [] } ]

L'esempio seguente configura il cluster per esportare le metrichecpu,mem, e. disk

[ { "Classification": "emr-metrics", "Properties": {}, "Configurations": [ { "Classification": "emr-system-metrics", "Properties": { "metrics_collection_interval": "20" }, "Configurations": [ { "Classification": "cpu", "Properties": { "metrics": "cpu_usage_guest,cpu_usage_idle", "metrics_collection_interval": "30", "drop_original_metrics": "cpu_usage_guest" } }, { "Classification": "mem", "Properties": { "metrics": "mem_active" } }, { "Classification": "disk", "Properties": { "metrics": "disk_used_percent", "resources": "/,/mnt", "drop_original_metrics": "" } } ] } ] } ]

L'esempio precedente di configurazione ha le seguenti proprietà:

  • Ogni 30 secondi, l'agente raccoglie la cpu_guest metrica per tutte le CPU. Puoi trovare la metrica aggregata nel namespace. CloudWatch CWAgent > cluster.id, instance.id, node.type, service.name

  • Ogni 30 secondi, l'agente raccoglie la metrica per tutte le cpu_idle CPU. Puoi trovare la metrica aggregata nel namespace. CloudWatch CWAgent > cluster.id, instance.id, node.type, service.name L'agente raccoglie anche le metriche per CPU. Li puoi trovare nello stesso namespace. L'agente raccoglie questa metrica perché la drop_original_metrics proprietà non contienecpu_idle, quindi non ignora la metrica.

  • Ogni 20 secondi, l'agente raccoglie la metrica. mem_active Puoi trovare la metrica aggregata nel namespace. CloudWatch CWAgent > cluster.id, instance.id, node.type, service.name

  • Ogni 20 secondi, l'agente raccoglie le disk_used_percent metriche relative ai montaggi su disco e su disco. / /mnt Puoi trovare le metriche aggregate nel namespace. CloudWatch CWAgent > cluster.id, instance.id, node.type, service.name L'agente raccoglie anche le metriche per montaggio. Li puoi trovare nello stesso namespace. L'agente raccoglie questa metrica perché la drop_original_metrics proprietà non contienedisk_used_percent, quindi non ignora la metrica.

Esempi di configurazioni delle metriche delle applicazioni

L'esempio seguente configura l' CloudWatch agente per interrompere l'esportazione delle metriche per il servizio Hadoop Namenode.

[ { "Classification": "emr-metrics", "Properties": {}, "Configurations": [ { "Classification": "emr-hadoop-hdfs-namenode-metrics", "Properties": {}, "Configurations": [] } ] } ]

L'esempio seguente configura un cluster per esportare le metriche delle applicazioni Hadoop.

[ { "Classification": "emr-metrics", "Properties": {}, "Configurations": [ { "Classification": "emr-hadoop-hdfs-namenode-metrics", "Properties": { "Hadoop:service=NameNode,name=FSNamesystem": "BlockCapacity,CapacityUsedGB", "otel.metric.export.interval": "20000" }, "Configurations": [] }, { "Classification": "emr-hadoop-hdfs-datanode-metrics", "Properties": { "Hadoop:service=DataNode,name=JvmMetrics": "MemNonHeapUsedM", "otel.metric.export.interval": "30000" }, "Configurations": [] }, { "Classification": "emr-hadoop-yarn-resourcemanager-metrics", "Properties": { "Hadoop:service=ResourceManager,name=CapacitySchedulerMetrics": "AllocateNumOps,NodeUpdateNumOps" }, "Configurations": [] } ] } ]

L'esempio precedente ha le seguenti proprietà:

  • Ogni 20 secondi, l'agente raccoglie le CapacityUsedGB metriche BlockCapacity e dalle istanze che eseguono il servizio Hadoop Namenode.

  • Ogni 30 secondi, l'agente raccoglie le MemNonHeapUsedM metriche dalle istanze che eseguono il servizio Hadoop Datanode.

  • Ogni 30 secondi, l'agente raccoglie le NodeUpdateNumOps metriche AllocateNumOps e dalle istanze che eseguono Hadoop YARN. ResourceManager

Esempio di Amazon Managed Service per Prometheus

L'esempio seguente dimostra come configurare l' CloudWatch agente per esportare le metriche in Amazon Managed Service for Prometheus.

Se stai attualmente esportando le metriche in Amazon Managed Service for Prometheus e desideri riconfigurare le metriche per il cluster e continuare a esportare le metriche in Amazon Managed Service for Prometheus, devi includere le proprietà e. metrics_destination prometheus_endpoint

[ { "Classification": "emr-metrics", "Properties": { "metrics_destination": "prometheus", "prometheus_endpoint": "http://amp-workspace/api/v1/remote_write" }, "Configurations": [] } ]

Per utilizzare l'agente in cui esportare le metriche, utilizza il seguente esempio. CloudWatch CloudWatch

[ { "Classification": "emr-metrics", "Properties": { "metrics_destination": "cloudwatch" }, "Configurations": [] } ]
Nota

L' CloudWatch agente dispone di un esportatore Prometheus che rinomina determinati attributi. Per le etichette delle metriche predefinite, Amazon Managed Service for Prometheus utilizza caratteri di sottolineatura al posto dei punti utilizzati da Amazon. CloudWatch Se utilizzi Amazon Managed Grafana per visualizzare le metriche predefinite in Amazon Managed Service for Prometheus, le etichette vengono visualizzate come,, e. cluster_id instance_id node_type service_name