View a markdown version of this page

Memasang Amazon FSx for Lustre dan Amazon FSx untuk OpenZFS ke cluster HyperPod - Amazon SageMaker AI

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Memasang Amazon FSx for Lustre dan Amazon FSx untuk OpenZFS ke cluster HyperPod

Untuk memasang sistem file bersama Amazon FSx for Lustre HyperPod ke kluster Anda, siapkan yang berikut ini.

  1. Gunakan Amazon VPC Anda.

    1. Agar instance HyperPod klaster dapat berkomunikasi dalam VPC Anda, pastikan Anda melampirkan Menyiapkan SageMaker HyperPod dengan VPC Amazon khusus ke peran IAM untuk. SageMaker HyperPod

    2. Dalamcreate_cluster.json, sertakan informasi VPC berikut.

      "VpcConfig": { 
    "SecurityGroupIds": [ "string" ],
    "Subnets": [ "string" ]
}

      Untuk tips selengkapnya tentang menyiapkan Amazon VPC, lihat. Prasyarat untuk menggunakan SageMaker HyperPod

  2. Untuk menyelesaikan konfigurasi Slurm dengan Amazon FSx for Lustre, Anda dapat menggunakan salah satu pendekatan berikut. Anda dapat menemukan informasi Amazon FSx baik dari konsol Amazon FSx for Lustre di akun Anda atau dengan menjalankan perintah berikut,. AWS CLI aws fsx describe-file-systems

    Opsi A: API-Driven Konfigurasi (Disarankan)

    Tentukan konfigurasi Amazon FSx secara langsung di payload CreateCluster API menggunakan InstanceStorageConfigs dalam setiap grup instans. Pendekatan ini mendukung FSx for Lustre dan FSx untuk OpenZFS, dan memungkinkan konfigurasi FSx per instance-group.

    "InstanceStorageConfigs": [
    {
        "FsxLustreConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx",
            "MountName": "1abcdefg"
        }
    }
]

    Untuk FSx untuk OpenZFS, gunakan sebagai gantinya: FsxOpenZfsConfig

    "InstanceStorageConfigs": [
    {
        "FsxOpenZfsConfig": {
            "DnsName": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
            "MountPath": "/fsx-openzfs"
        }
    }
]

    Untuk detail selengkapnya, lihat Memulai SageMaker HyperPod menggunakan AWS CLI.

    Opsi B: Konfigurasi Warisan

    Tentukan nama DNS Amazon FSx dan nama mount Amazon FSx provisioning_parameters.json seperti yang ditunjukkan pada gambar di bagian. Skrip siklus hidup dasar yang disediakan oleh HyperPod

    "fsx_dns_name": "fs-12345678a90b01cde.fsx.us-west-2.amazonaws.com",
"fsx_mountname": "1abcdefg"