Montage d'Amazon FSx for Lustre et d'Amazon FSx pour OpenZFS sur un cluster HyperPod - Amazon SageMaker AI

Les traductions sont fournies par des outils de traduction automatique. En cas de conflit entre le contenu d'une traduction et celui de la version originale en anglais, la version anglaise prévaudra.

Montage d'Amazon FSx for Lustre et d'Amazon FSx pour OpenZFS sur un cluster HyperPod

Pour monter un système de fichiers partagé Amazon FSx for Lustre sur votre HyperPod cluster, configurez ce qui suit.

  1. Utilisez votre réseau Amazon VPC.

    1. Pour que les instances de HyperPod cluster communiquent au sein de votre VPC, assurez-vous de les associer Configuration SageMaker HyperPod avec un Amazon VPC personnalisé au rôle IAM pour. SageMaker HyperPod

    2. Dans create_cluster.json, incluez les informations de VPC suivantes.

      "VpcConfig": { 
    "SecurityGroupIds": [ "string" ],
    "Subnets": [ "string" ]
}

      Pour plus de conseils sur la configuration d’Amazon VPC, consultez Conditions préalables à l'utilisation SageMaker HyperPod.

  2. Pour terminer la configuration de Slurm avec Amazon FSx for Lustre, vous pouvez utiliser l'une des approches suivantes. Vous pouvez trouver les FSx informations Amazon depuis la console Amazon FSx for Lustre de votre compte ou en exécutant la AWS CLI commande suivante,aws fsx describe-file-systems.

    Option A : Configuration pilotée par API (recommandée)

    Spécifiez la FSx configuration Amazon directement dans la charge utile de l' CreateCluster API InstanceStorageConfigs au sein de chaque groupe d'instances. Cette approche prend en charge à FSx la fois Lustre et FSx OpenZFS, et permet per-instance-group FSx la configuration.

    "InstanceStorageConfigs": [
    {
        "FsxLustreConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx",
            "MountName": "1abcdefg"
        }
    }
]

    FSx Pour OpenZFS, utilisez FsxOpenZfsConfig plutôt :

    "InstanceStorageConfigs": [
    {
        "FsxOpenZfsConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx-openzfs"
        }
    }
]

    Pour plus de détails, consultez Commencer à SageMaker HyperPod utiliser la AWS CLI.

    Option B : ancienne configuration

    Spécifiez le nom FSx DNS Amazon et FSx le nom de montage Amazon provisioning_parameters.json comme indiqué dans la figure de la Scripts de cycle de vie de base fournis par HyperPod section.

    "fsx_dns_name": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
"fsx_mountname": "1abcdefg"