View a markdown version of this page

Mounten von Amazon FSx for Lustre und Amazon FSx for OpenZFS in einem Cluster HyperPod - Amazon SageMaker KI

Die vorliegende Übersetzung wurde maschinell erstellt. Im Falle eines Konflikts oder eines Widerspruchs zwischen dieser übersetzten Fassung und der englischen Fassung (einschließlich infolge von Verzögerungen bei der Übersetzung) ist die englische Fassung maßgeblich.

Mounten von Amazon FSx for Lustre und Amazon FSx for OpenZFS in einem Cluster HyperPod

Um ein gemeinsam genutztes Amazon FSx for Lustre-Dateisystem in Ihrem HyperPod Cluster zu mounten, richten Sie Folgendes ein.

  1. Verwenden Sie Ihre Amazon-VPC.

    1. Damit HyperPod Cluster-Instances innerhalb Ihrer VPC kommunizieren können, stellen Sie sicher, dass Sie die der Einrichtung SageMaker HyperPod mit einer benutzerdefinierten Amazon VPC IAM-Rolle für zuordnen. SageMaker HyperPod

    2. Fügen Sie in create_cluster.json die folgenden VPC-Informationen ein.

      "VpcConfig": { 
    "SecurityGroupIds": [ "string" ],
    "Subnets": [ "string" ]
}

      Weitere Tipps zur Einrichtung von Amazon VPC finden Sie unter Voraussetzungen für die Verwendung SageMaker HyperPod.

  2. Um die Konfiguration von Slurm mit Amazon FSx for Lustre abzuschließen, können Sie einen der folgenden Ansätze verwenden. Sie finden die Amazon FSx-Informationen entweder über die Amazon FSx for Lustre-Konsole in Ihrem Konto oder indem Sie den folgenden AWS CLI Befehl ausführen:. aws fsx describe-file-systems

    Option A: API-Driven Konfiguration (empfohlen)

    Geben Sie die Amazon FSx-Konfiguration direkt in der CreateCluster API-Nutzlast an, indem Sie sie InstanceStorageConfigs innerhalb jeder Instanzgruppe verwenden. Dieser Ansatz unterstützt sowohl FSx for Lustre als auch FSx for OpenZFS und ermöglicht die FSx-Konfiguration pro Instanzgruppe.

    "InstanceStorageConfigs": [
    {
        "FsxLustreConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx",
            "MountName": "1abcdefg"
        }
    }
]

    Verwenden Sie für FSx for OpenZFS stattdessen: FsxOpenZfsConfig

    "InstanceStorageConfigs": [
    {
        "FsxOpenZfsConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx-openzfs"
        }
    }
]

    Weitere Informationen finden Sie unter Erste Schritte mit der SageMaker HyperPod Verwendung der AWS CLI.

    Option B: Legacy-Konfiguration

    Geben Sie den Amazon FSx-DNS-Namen und den Amazon FSx-Mount-Namen an, provisioning_parameters.json wie in der Abbildung im Abschnitt gezeigt. Die grundlegenden Lebenszyklusskripte werden bereitgestellt von HyperPod

    "fsx_dns_name": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
"fsx_mountname": "1abcdefg"