View a markdown version of this page

Montaggio di Amazon FSx for Lustre e Amazon FSx per OpenZFS su un cluster HyperPod - Amazon SageMaker AI

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Montaggio di Amazon FSx for Lustre e Amazon FSx per OpenZFS su un cluster HyperPod

Per montare un file system condiviso Amazon FSx for Lustre nel tuo HyperPod cluster, configura quanto segue.

  1. Utilizza il tuo Amazon VPC.

    1. Affinché le istanze del HyperPod cluster possano comunicare all'interno del tuo VPC, assicurati di collegarle al ruolo Configurazione SageMaker HyperPod con un Amazon VPC personalizzato IAM per. SageMaker HyperPod

    2. In create_cluster.json, includi le informazioni sul VPC seguenti.

      "VpcConfig": { 
    "SecurityGroupIds": [ "string" ],
    "Subnets": [ "string" ]
}

      Per ulteriori suggerimenti sulla configurazione di Amazon VPC, consulta Prerequisiti per l'utilizzo SageMaker HyperPod.

  2. Per completare la configurazione di Slurm con Amazon FSx for Lustre, puoi utilizzare uno dei seguenti approcci. Puoi trovare le informazioni di Amazon FSx dalla console Amazon FSx for Lustre nel tuo account o eseguendo il seguente comando,. AWS CLI aws fsx describe-file-systems

    Opzione A: API-Driven Configurazione (consigliata)

    Specifica la configurazione di Amazon FSx direttamente nel payload dell' CreateCluster API utilizzando InstanceStorageConfigs all'interno di ciascun gruppo di istanze. Questo approccio supporta sia FSx for Lustre che FSx for OpenZFS e consente la configurazione FSx per gruppo di istanze.

    "InstanceStorageConfigs": [
    {
        "FsxLustreConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx",
            "MountName": "1abcdefg"
        }
    }
]

    Per FsxOpenZfsConfig FSx for OpenZFS, usa invece:

    "InstanceStorageConfigs": [
    {
        "FsxOpenZfsConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx-openzfs"
        }
    }
]

    Per maggiori dettagli, consulta Guida introduttiva all' SageMaker HyperPod uso della CLI. AWS

    Opzione B: configurazione precedente

    Specifica il nome DNS di Amazon FSx e il nome di montaggio Amazon FSx provisioning_parameters.json come mostrato nella figura nella sezione. Script del ciclo di vita di base forniti da HyperPod

    "fsx_dns_name": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
"fsx_mountname": "1abcdefg"