Montaggio di Amazon FSx for Lustre e Amazon FSx for OpenZFS su un cluster HyperPod - Amazon SageMaker AI

Le traduzioni sono generate tramite traduzione automatica. In caso di conflitto tra il contenuto di una traduzione e la versione originale in Inglese, quest'ultima prevarrà.

Montaggio di Amazon FSx for Lustre e Amazon FSx for OpenZFS su un cluster HyperPod

Per montare un file system condiviso Amazon FSx for Lustre sul tuo HyperPod cluster, configura quanto segue.

  1. Utilizza il tuo Amazon VPC.

    1. Affinché le istanze del HyperPod cluster comunichino all'interno del tuo VPC, assicurati di associarle Configurazione SageMaker HyperPod con un Amazon VPC personalizzato al ruolo IAM per. SageMaker HyperPod

    2. In create_cluster.json, includi le informazioni sul VPC seguenti.

      "VpcConfig": { 
    "SecurityGroupIds": [ "string" ],
    "Subnets": [ "string" ]
}

      Per ulteriori suggerimenti sulla configurazione di Amazon VPC, consulta Prerequisiti per l'utilizzo SageMaker HyperPod.

  2. Per completare la configurazione di Slurm con Amazon FSx for Lustre, puoi utilizzare uno dei seguenti approcci. Puoi trovare le FSx informazioni di Amazon dalla console Amazon FSx for Lustre nel tuo account o eseguendo il seguente AWS CLI comando,aws fsx describe-file-systems.

    Opzione A: configurazione basata su API (consigliata)

    Specificate la FSx configurazione Amazon direttamente nel payload dell' CreateCluster API utilizzando InstanceStorageConfigs all'interno di ogni gruppo di istanze. Questo approccio supporta sia FSx Lustre che OpenZFS e consente FSx la configurazione. per-instance-group FSx 

    "InstanceStorageConfigs": [
    {
        "FsxLustreConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx",
            "MountName": "1abcdefg"
        }
    }
]

    FSx Per OpenZFS, usa invece: FsxOpenZfsConfig

    "InstanceStorageConfigs": [
    {
        "FsxOpenZfsConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx-openzfs"
        }
    }
]

    Per ulteriori dettagli, consulta Guida introduttiva all' SageMaker HyperPod uso della AWS CLI.

    Opzione B: configurazione precedente

    Specificare il nome Amazon FSx DNS e il nome di FSx montaggio Amazon provisioning_parameters.json come mostrato nella figura nella Script del ciclo di vita di base forniti da HyperPod sezione.

    "fsx_dns_name": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
"fsx_mountname": "1abcdefg"