View a markdown version of this page

SSD 和 HDD 存储类别的性能特点 - FSx for Lustre

本文属于机器翻译版本。若本译文内容与英语原文存在差异,则一律以英文原文为准。

SSD 和 HDD 存储类别的性能特点

预置 SSD 和 HDD 存储类别的 FSx for Lustre 文件系统支持的吞吐量与其存储容量成正比。适用于 Lustre 的 Amazon FSx 文件系统可扩展至数 TBps 的吞吐量和数百万的 IOPS。适用于 Lustre 的 Amazon FSx 还支持从数千个计算实例并行访问同一个文件或目录。这种访问可以实现从应用程序内存到存储的快速数据检查点,这是高性能计算(HPC)中的常用技术。创建文件系统后,您可以根据需要,随时增加存储容量和吞吐能力。有关更多信息,请参阅 管理存储容量

FSx for Lustre 文件系统使用 I/O 网络积分机制提供突发读取吞吐量,根据平均带宽利用率分配网络带宽。文件系统在网络带宽低于其基准限制时会积累积分,并能够在执行网络数据传输时使用这些积分。

下表显示使用 SSD 和 HDD 存储类别的 FSx for Lustre 部署选项的设计性能。

SSD 存储选项的文件系统性能
部署类型 网络吞吐量(MBps/TiB 已配置存储的) 网络 IOPS(已配置存储IOPS/TiB 的) 缓存存储空间(预配置了 GiB RAM/TiB 的存储空间) 每次文件操作的磁盘延迟(毫秒,P50) 磁盘吞吐量(预配置MBps/TiB 的存储或 SSD 缓存的)

基准

突增

基准

突增

SCRATCH_2 200 1300

数万基准

数十万突增

6.7

元数据:亚毫秒

数据:亚毫秒

200(读取)

100(写入)

PERSISTENT-125 320 1300 3.4

125

500
PERSISTENT-250 640 1300 6.8

250

500
PERSISTENT-500 1300 13.7 500

PERSISTENT-1000 2600 27.3 1000
HDD 存储选项的文件系统性能
部署类型 网络吞吐量(预配置MBps/TiB 的存储或 SSD 缓存的) 网络 IOPS(已配置存储IOPS/TiB 的) 缓存存储空间(预配置了 GiB RAM/TiB 的存储空间) 每次文件操作的磁盘延迟(毫秒,P50) 磁盘吞吐量(预配置MBps/TiB 的存储或 SSD 缓存的)

基准

突增

基准

突增

PERSISTENT-12
HDD 存储 40 375*

数万基准

数十万突增

0.4 内存

元数据:亚毫秒

数据:个位数毫秒

12

80(读取)

50(写入)

SSD 读取缓存

200

1,900

200 SSD 缓存

数据:亚毫秒

200

-

PERSISTENT-40
HDD 存储 150 1,300*

数万基准

数十万突增

1.5

元数据:亚毫秒

数据:个位数毫秒

40

250(读取)

150(写入)

SSD 读取缓存

750

6500

200 SSD 缓存

数据:亚毫秒

200

-

上一代 SSD 存储选项的文件系统性能
部署类型 网络吞吐量(预置存储的 MBps/TiB) 网络 IOPS(预置存储的 IOPS/TiB) 缓存存储(预置存储的 GiB/TiB) 每次文件操作的磁盘延迟(毫秒,P50) 磁盘吞吐量(预置存储或 SSD 缓存的 MBps/TiB)

基准

突增

基准

突增

PERSISTENT-50 250 1,300*

数万基准

数十万突增

2.2 RAM

元数据:亚毫秒

数据:亚毫秒

50

240

PERSISTENT-100 500 1,300* 4.4 内存 100 240
PERSISTENT-200 750 1,300* 8.8 RAM 200 240
注意

* 以下永久文件系统可 AWS 区域 提供高达每 TiB 存储空间 530 Mbps 的网络突发:非洲(开普敦)、亚太地区(香港)、亚太地区(大阪)、亚太地区(新加坡)、加拿大(中部)、欧洲(法兰克福)、欧洲(伦敦)、欧洲(米兰)、欧洲(斯德哥尔摩)、中东(巴林)、南美洲(圣保罗)、中国和美国西部(洛杉矶)。

例如:聚合基准吞吐量和突增吞吐量

以下示例说明了存储容量和磁盘吞吐量对文件系统性能的影响。

存储容量为 4.8TiB,每单位存储的吞吐量为 50MBps/TiB 的持久性文件系统的聚合基准磁盘吞吐量为 240MBps,突增磁盘吞吐量为 1.152GBps。

无论文件系统大小如何,适用于 Lustre 的 Amazon FSx 都能为文件操作提供一致的亚毫秒级延迟。