Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

# Amazon EMR versi rilis 6.x
<a name="emr-release-6x"></a>

Bagian ini berisi versi aplikasi, catatan rilis, versi komponen, dan klasifikasi konfigurasi yang tersedia di setiap versi rilis Amazon EMR 6.x.

Saat meluncurkan klaster, Anda dapat memilih dari beberapa rilis Amazon EMR. Ini memungkinkan Anda untuk menguji dan menggunakan versi aplikasi yang sesuai dengan kebutuhan kompatibilitas Anda. Anda menentukan nomor rilis dengan *label rilis*. Label rilis ada dalam bentuk`emr-x.x.x`. Misalnya, `emr-7.12.0`.

Rilis EMR Amazon baru tersedia di berbagai Wilayah selama beberapa hari, dimulai dengan Wilayah pertama pada tanggal rilis awal. Versi rilis terbaru mungkin tidak tersedia di Wilayah Anda selama periode ini.

Untuk tabel lengkap versi aplikasi di setiap rilis Amazon EMR 6.x, lihat. [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)

**Topics**
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Amazon EMR rilis 6.15.0](emr-6150-release.md)
+ [Amazon EMR rilis 6.14.0](emr-6140-release.md)
+ [Amazon EMR rilis 6.13.0](emr-6130-release.md)
+ [Amazon EMR rilis 6.12.0](emr-6120-release.md)
+ [Amazon EMR rilis 6.11.1](emr-6111-release.md)
+ [Amazon EMR rilis 6.11.0](emr-6110-release.md)
+ [Amazon EMR rilis 6.10.1](emr-6101-release.md)
+ [Amazon EMR rilis 6.10.0](emr-6100-release.md)
+ [Amazon EMR rilis 6.9.1](emr-691-release.md)
+ [Amazon EMR rilis 6.9.0](emr-690-release.md)
+ [Amazon EMR rilis 6.8.1](emr-681-release.md)
+ [Amazon EMR rilis 6.8.0](emr-680-release.md)
+ [Amazon EMR rilis 6.7.0](emr-670-release.md)
+ [Amazon EMR rilis 6.6.0](emr-660-release.md)
+ [Amazon EMR rilis 6.5.0](emr-650-release.md)
+ [Amazon EMR rilis 6.4.0](emr-640-release.md)
+ [Amazon EMR rilis 6.3.1](emr-631-release.md)
+ [Amazon EMR Rilis 6.3.0](emr-630-release.md)
+ [Amazon EMR rilis 6.2.1](emr-621-release.md)
+ [Amazon EMR rilis 6.2.0](emr-620-release.md)
+ [Amazon EMR rilis 6.1.1](emr-611-release.md)
+ [Amazon EMR Rilis 6.1.0](emr-610-release.md)
+ [Amazon EMR rilis 6.0.1](emr-601-release.md)
+ [Amazon EMR Rilis 6.0.0](emr-600-release.md)

# Versi aplikasi di Amazon EMR 6.x rilis
<a name="emr-release-app-versions-6.x"></a>

Tabel berikut mencantumkan versi aplikasi yang tersedia di setiap rilis Amazon EMR 6.x.


**Informasi versi aplikasi**  

|  | emr-6.15.0 | emr-6.14.0 | emr-6.13.0 | emr-6.12.0 | emr-6.11.1 | emr-6.11.0 | emr-6.10.1 | emr-6.10.0 | emr-6.9.1 | emr-6.9.0 | emr-6.8.1 | emr-6.8.0 | emr-6.7.0 | emr-6.6.0 | emr-6.5.0 | emr-6.4.0 | emr-6.3.1 | emr-6.3.0 | emr-6.2.1 | emr-6.2.0 | emr-6.1.1 | emr-6.1.0 | emr-6.0.1 | emr-6.0.0 | 
| --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | --- | 
| AWS SDK for Java | 2.20.160-amzn-0, 1.12.569 | 1.12.543 | 1.12.513 | 1.12.490 | 1.12.446 | 1.12.446 | 1.12.397 | 1.12.397 | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.31 | 1.12.31 | 1.11.977 | 1.11.977 | 1.11.880 | 1.11.880 | 1.11.828 | 1.11.828 | 1.11.711 | 1.11.711 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 2.11.12 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  | 
| Delta | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 2.1.0 | 2.1.0 |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  | 
| Flink | 1.17.1-amzn-1 | 1.17.1-amzn-0 | 1.17.0 | 1.17.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 1.15.2 | 1.15.2 | 1.15.1 | 1.15.1 | 1.14.2 | 1.14.2 | 1.14.0 | 1.13.1 | 1.12.1 | 1.12.1 | 1.11.2 | 1.11.2 | 1.11.0 | 1.11.0 |  -  |  -  | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.17-amzn-3 | 2.4.17-amzn-2 | 2.4.17-amzn-1 | 2.4.17-amzn-0 | 2.4.15-amzn-1.1 | 2.4.15-amzn-1 | 2.4.15-amzn-0.1 | 2.4.15-amzn-0 | 2.4.13-amzn-0.1 | 2.4.13-amzn-0 | 2.4.12-amzn-0.1 | 2.4.12-amzn-0 | 2.4.4-amzn-3 | 2.4.4-amzn-2 | 2.4.4-amzn-1 | 2.4.4-amzn-0 | 2.2.6-amzn-1 | 2.2.6-amzn-1 | 2.2.6-amzn-0 | 2.2.6-amzn-0 | 2.2.5 | 2.2.5 | 2.2.3 | 2.2.3 | 
| HCatalog | 3.1.3-amzn-8 | 3.1.3-amzn-7 | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hadoop | 3.3.6-amzn-1 | 3.3.3-amzn-6 | 3.3.3-amzn-5 | 3.3.3-amzn-4 | 3.3.3-amzn-3.1 | 3.3.3-amzn-3 | 3.3.3-amzn-2.1 | 3.3.3-amzn-2 | 3.3.3-amzn-1.1 | 3.3.3-amzn-1 | 3.2.1-amzn-8.1 | 3.2.1-amzn-8 | 3.2.1-amzn-7 | 3.2.1-amzn-6 | 3.2.1-amzn-5 | 3.2.1-amzn-4 | 3.2.1-amzn-3.1 | 3.2.1-amzn-3 | 3.2.1-amzn-2.1 | 3.2.1-amzn-2 | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 3.2.1-amzn-0.1 | 3.2.1-amzn-0 | 
| Hive | 3.1.3-amzn-8 | 3.1.3-amzn-7 | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hudi | 0.14.0-amzn-0 | 0.13.1-amzn-2 | 0.13.1-amzn-1 | 0.13.1-amzn-0 | 0.13.0-amzn-0 | 0.13.0-amzn-0 | 0.12.2-amzn-0 | 0.12.2-amzn-0 | 0.12.1-amzn-0 | 0.12.1-amzn-0 | 0.11.1-amzn-0 | 0.11.1-amzn-0 | 0.11.0-amzn-0 | 0.10.1-amzn-0 | 0.9.0-amzn-1 | 0.8.0-amzn-0 | 0.7.0-amzn-0 | 0.7.0-amzn-0 | 0.6.0-amzn-1 | 0.6.0-amzn-1 | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 0.5.0-incubating-amzn-1 | 0.5.0-incubating-amzn-1 | 
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 4.9.0 | 4.9.0 | 4.9.0 | 4.9.0 | 4.8.0 | 4.8.0 | 4.7.1 | 4.7.1 | 4.4.0 | 4.4.0 | 
| Iceberg | 1.4.0-amzn-0 | 1.3.1-amzn-0 | 1.3.0-amzn-1 | 1.3.0-amzn-0 | 1.2.0-amzn-0 | 1.2.0-amzn-0 | 1.1.0-amzn-0 | 1.1.0-amzn-0 | 0.14.1-amzn-0 | 0.14.1-amzn-0 | 0.14.0-amzn-0 | 0.14.0-amzn-0 | 0.13.1-amzn-0 | 0.13.1 | 0.12.0 |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 |  -  |  -  |  -  |  -  | 
| JupyterHub | 1.5.0 | 1.5.0 | 1.5.0 | 1.4.1 | 1.4.1 | 1.4.1 | 1.5.0 | 1.5.0 | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 1.2.2 | 1.2.2 | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | 1.7.0 | 1.7.0 | 1.7.0 | 1.7.0 | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | 
| Mahout |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | 
| Phoenix | 5.1.3 | 5.1.3 | 5.1.3 | 5.1.3 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 |  -  |  -  | 
| Presto | 0,283-amzn-0 | 0,281-amzn-2 | 0,281-amzn-1 | 0,281-amzn-0 | 0,279 amzn-0 | 0,279 amzn-0 | 0.278.1-amzn-0 | 0.278.1-amzn-0 | 0,276 amzn-0 | 0,276 amzn-0 | 0.273.3-amzn-0 | 0.273.3-amzn-0 | 0,272-amzn-0 | 0,267-amzn-0 | 0,261-amzn-0 | 0.254.1-amzn-0 | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 0.238.3-amzn-1 | 0.238.3-amzn-1 | 0,232 | 0,232 | 0,230 | 0,230 | 
| Spark | 3.4.1-amzn-2 | 3.4.1-amzn-1 | 3.4.1-amzn-0 | 3.4.0-amzn-0 | 3.3.2-amzn-0.1 | 3.3.2-amzn-0 | 3.3.1-amzn-0.1 | 3.3.1-amzn-0 | 3.3.0-amzn-1.1 | 3.3.0-amzn-1 | 3.3.0-amzn-0.1 | 3.3.0-amzn-0 | 3.2.1-amzn-0 | 3.2.0-amzn-0 | 3.1.2-amzn-1 | 3.1.2-amzn-0 | 3.1.1-amzn-0.1 | 3.1.1-amzn-0 | 3.0.1-amzn-0.1 | 3.0.1-amzn-0 | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 2.4.4 | 2.4.4 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 |  -  |  -  | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 2.10.0 | 2.10.0 | 2.9.1 | 2.9.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 2.3.1 | 2.3.1 | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | 
| Tez | 0.10.2-amzn-6 | 0.10.2-amzn-5 | 0.10.2-amzn-4 | 0.10.2-amzn-3 | 0.10.2-amzn-2.1 | 0.10.2-amzn-2 | 0.10.2-amzn-1.1 | 0.10.2-amzn-1 | 0.10.2-amzn-0.1 | 0.10.2-amzn-0 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 426-amzn-0 | 422-amzn-0 | 414-amzn-1 | 414-amzn-0 | 410-amzn-0 | 410-amzn-0 | 403-amzn-0 | 403-amzn-0 | 398-amzn-0 | 398-amzn-0 | 388-amzn-0 | 388-amzn-0 | 378-amzn-0 | 367-amzn-0 | 360 | 359 | 350 | 350 | 343 | 343 | 338 | 338 |  -  |  -  | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.0 | 0.10.0 | 0.10.0 | 0.9.0 | 0.9.0 | 0.9.0 | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-SNAPSHOT | 0.9.0-SNAPSHOT | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.7 | 3.5.7 | 3.5.7 | 3.5.7 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

# Amazon EMR rilis 6.15.0
<a name="emr-6150-release"></a>

## 6.15.0 versi aplikasi
<a name="emr-6150-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.15.0 | emr-6.14.0 | emr-6.13.0 | emr-6.12.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 2.20.160-amzn-0, 1.12.569 | 1.12.543 | 1.12.513 | 1.12.490 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.4.0 | 2.4.0 | 2.4.0 | 2.4.0 | 
| Flink | 1.17.1-amzn-1 | 1.17.1-amzn-0 | 1.17.0 | 1.17.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.17-amzn-3 | 2.4.17-amzn-2 | 2.4.17-amzn-1 | 2.4.17-amzn-0 | 
| HCatalog | 3.1.3-amzn-8 | 3.1.3-amzn-7 | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 
| Hadoop | 3.3.6-amzn-1 | 3.3.3-amzn-6 | 3.3.3-amzn-5 | 3.3.3-amzn-4 | 
| Hive | 3.1.3-amzn-8 | 3.1.3-amzn-7 | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 
| Hudi | 0.14.0-amzn-0 | 0.13.1-amzn-2 | 0.13.1-amzn-1 | 0.13.1-amzn-0 | 
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 
| Iceberg | 1.4.0-amzn-0 | 1.3.1-amzn-0 | 1.3.0-amzn-1 | 1.3.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.5.0 | 1.5.0 | 1.5.0 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.3 | 5.1.3 | 5.1.3 | 5.1.3 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,283-amzn-0 | 0,281-amzn-2 | 0,281-amzn-1 | 0,281-amzn-0 | 
| Spark | 3.4.1-amzn-2 | 3.4.1-amzn-1 | 3.4.1-amzn-0 | 3.4.0-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 
| Tez | 0.10.2-amzn-6 | 0.10.2-amzn-5 | 0.10.2-amzn-4 | 0.10.2-amzn-3 | 
| Trino (PrestoSQL) | 426-amzn-0 | 422-amzn-0 | 414-amzn-1 | 414-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan terbitan 6.15.0
<a name="emr-6150-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.15.0. Perubahan relatif terhadap 6.14.0. Untuk informasi tentang timeline rilis, lihat. [6.15.0 perubahan log](#6150-changelog)

**Fitur baru**
+ **Upgrade aplikasi** — Amazon EMR 6.15.0 application upgrades include Apache Hadoop 3.3.6, Apache Hudi 0.14.0-amzn-0, Iceberg 1.4.0-amzn-0, and Trino 426.
+ **[Peluncuran lebih cepat untuk kluster EMR yang berjalan di](https://aws.amazon.com/about-aws/whats-new/2023/11/amazon-emr-ec2-clusters-5-minutes-less/)** EC2 - Sekarang hingga 35% lebih cepat untuk meluncurkan EMR Amazon di cluster EC2. Dengan peningkatan ini, sebagian besar pelanggan dapat meluncurkan cluster mereka dalam 5 menit atau kurang.
+ **[CodeWhisperer untuk EMR Studio](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-studio-codewhisperer.html)** - Anda sekarang dapat menggunakan Amazon dengan CodeWhisperer Amazon EMR Studio untuk mendapatkan rekomendasi waktu nyata saat Anda menulis kode. JupyterLab CodeWhisperer dapat menyelesaikan komentar Anda, menyelesaikan satu baris kode, membuat line-by-line rekomendasi, dan menghasilkan fungsi yang sepenuhnya terbentuk.
+ **[Waktu restart pekerjaan lebih cepat dengan Flink](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/flink-restart.html)** - Dengan Amazon EMR 6.15.0 dan yang lebih tinggi, beberapa mekanisme baru tersedia untuk Apache Flink untuk meningkatkan waktu restart pekerjaan selama pemulihan tugas atau operasi penskalaan. Ini mengoptimalkan kecepatan pemulihan dan memulai ulang grafik eksekusi untuk meningkatkan stabilitas pekerjaan.
+ **[Kontrol akses tingkat tabel dan berbutir halus untuk format tabel terbuka —](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-lf-enable.html)** Dengan Amazon EMR 6.15.0 dan yang lebih tinggi, saat Anda menjalankan pekerjaan Spark di Amazon EMR pada kluster EC2 yang mengakses data di Katalog Data Glue, Anda AWS Lake Formation dapat menggunakannya untuk menerapkan izin tabel, baris, kolom, dan tingkat sel pada tabel berbasis Hudi AWS , Iceberg, atau Delta Lake.
+ **Upgrade Hadoop** - Amazon EMR 6.15.0 termasuk upgrade Apache Hadoop ke versi 3.3.6. Hadoop 3.3.6 adalah versi terbaru pada saat penyebaran Amazon EMR 6.15, dirilis oleh Apache pada Juni 2023. Rilis sebelumnya Amazon EMR (6.9.0 hingga 6.14.x) menggunakan Hadoop 3.3.3.

  Upgrade mencakup ratusan perbaikan dan perbaikan, dan fitur yang mencakup parameter datanode yang dapat dikonfigurasi ulang, `DFSAdmin` opsi untuk memulai operasi konfigurasi ulang massal pada semua datanodes langsung, dan API vektor yang memungkinkan pembaca seek-heavy menentukan beberapa rentang untuk dibaca. Hadoop 3.3.6 juga menambahkan dukungan untuk HDFS APIs dan semantik untuk write-ahead log (WAL), sehingga dapat berjalan pada implementasi sistem penyimpanan lainnya. HBase [https://hadoop.apache.org/docs/r3.3.6/hadoop-project-dist/hadoop-common/release/3.3.6/CHANGELOG.3.3.6.html](https://hadoop.apache.org/docs/r3.3.6/hadoop-project-dist/hadoop-common/release/3.3.6/CHANGELOG.3.3.6.html) [3.3.4, 3.3.5, dan 3.3.6](https://hadoop.apache.org/docs/r3.3.4/hadoop-project-dist/hadoop-common/release/3.3.4/CHANGELOG.3.3.4.html) [dalam dokumentasi Apache Hadoop.](https://hadoop.apache.org/docs/r3.3.5/hadoop-project-dist/hadoop-common/release/3.3.5/CHANGELOG.3.3.5.html)
+ **Support untuk AWS SDK for Java, versi** [2 - Aplikasi Amazon EMR 6.15.0 dapat menggunakan SDK for AWS Java [versi](https://github.com/aws/aws-sdk-java/tree/1.12.569) 1.12.569 atau 2.20.160 jika aplikasi mendukung v2.](https://github.com/aws/aws-sdk-java-v2/tree/2.20.160) AWS SDK for Java 2.x adalah penulisan ulang utama dari basis kode versi 1.x. Ini dibangun di atas Java 8\$1 dan menambahkan beberapa fitur yang sering diminta. Ini termasuk dukungan untuk I/O non-pemblokiran, dan kemampuan untuk menyambungkan implementasi HTTP yang berbeda saat runtime. Untuk informasi selengkapnya, termasuk **Panduan Migrasi dari SDK for Java v1 ke** v2, lihat AWS panduan [SDK for Java](https://docs.aws.amazon.com/sdk-for-java), versi 2.

**Masalah yang diketahui**
+ Skrip instance-state on-cluster yang memantau kesehatan instance dapat mengkonsumsi CPU dan sumber daya memori yang berlebihan ketika ada sejumlah besar thread yang and/or membuka pegangan file pada node.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 
+ Untuk meningkatkan kluster EMR ketersediaan tinggi Anda, rilis ini memungkinkan konektivitas ke daemon EMR Amazon di host lokal yang menggunakan titik akhir. IPv6
+ Rilis ini memungkinkan TLS 1.2 untuk komunikasi dengan ZooKeeper disediakan di semua node utama klaster ketersediaan tinggi Anda.
+ Rilis ini meningkatkan pengelolaan file log ZooKeeper transaksi yang dipertahankan pada node primer untuk meminimalkan skenario di mana file log tumbuh di luar batas dan mengganggu operasi cluster.
+ Rilis ini membuat komunikasi intra-node lebih tangguh untuk kluster EMR ketersediaan tinggi. Peningkatan ini mengurangi kemungkinan kegagalan tindakan bootstrap atau kegagalan awal cluster.
+ Tez di Amazon EMR 6.15.0 memperkenalkan konfigurasi yang dapat Anda tentukan untuk membuka pemisahan input secara asinkron dalam pemisahan yang dikelompokkan Tez. Ini menghasilkan kinerja kueri baca yang lebih cepat ketika ada sejumlah besar pemisahan input dalam satu pemisahan yang dikelompokkan Tez. Untuk informasi lebih lanjut, lihat [Pembukaan split asinkron Tez](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/tez-configure.html#tez-configure-async).
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6150-release.html)

## 6.15.0 versi Java default
<a name="emr-6150-jdk"></a>

Amazon EMR merilis 6.12.0 dan lebih tinggi mendukung semua aplikasi dengan Amazon Corretto 8 secara default, kecuali untuk Trino. Untuk Trino, Amazon EMR mendukung Amazon Corretto 17 secara default dimulai dengan rilis Amazon EMR 6.9.0. Amazon EMR juga mendukung beberapa aplikasi dengan Amazon Corretto 11 dan 17. Aplikasi tersebut tercantum dalam tabel berikut. Jika Anda ingin mengubah JVM default pada cluster Anda, ikuti instruksi [Konfigurasikan aplikasi untuk menggunakan Java Virtual Machine tertentu](configuring-java8.md) untuk setiap aplikasi yang berjalan di cluster. Anda hanya dapat menggunakan satu versi runtime Java untuk sebuah cluster. Amazon EMR tidak mendukung menjalankan node atau aplikasi yang berbeda pada versi runtime yang berbeda pada cluster yang sama.

Meskipun Amazon EMR mendukung Amazon Corretto 11 dan 17 di Apache Spark, Apache Hadoop, dan Apache Hive, kinerja mungkin menurun untuk beberapa beban kerja saat Anda menggunakan versi Corretto ini. Kami menyarankan Anda menguji beban kerja Anda sebelum mengubah default.

Tabel berikut menunjukkan versi Java default untuk aplikasi di Amazon EMR 6.15.0:


| Aplikasi | Versi Java/Amazon Corretto (defaultnya tebal) | 
| --- | --- | 
| kuala | 17, 11, 8 | 
| Flink | 11, 8 | 
| Ganglia | 8 | 
| HBase | 11, 8 | 
| HCatalog | 17, 11, 8 | 
| Hadoop | 17, 11, 8 | 
| Hive | 17, 11, 8 | 
| Hudi | 17, 11, 8 | 
| Gunung es | 17, 11, 8 | 
| Livy | 17, 11, 8 | 
| Oozie | 17, 11, 8 | 
| Phoenix | 8 | 
| PrestoDB | 8 | 
| Spark | 17, 11, 8 | 
| JERAM Spark | 17, 11, 8 | 
| Sqoop | 8 | 
| Tez | 17, 11, 8 | 
| Trino | 17 | 
| Zeppelin | 8 | 
| Pig | 8 | 
| Zookeeper | 8 | 

## 6.15.0 versi komponen
<a name="emr-6150-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.4.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| delta-standalone-connectors | 0.6.0 | Delta Connectors menyediakan runtime yang berbeda untuk mengintegrasikan Delta Lake dengan mesin seperti Flink, Hive dan Presto. | 
| emr-ddb | 5.2.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.8.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.12.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.29.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.8.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.2.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.60.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.17.1-amzn-1 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.17.1-amzn-1 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.6-amzn-1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.6-amzn-1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.6-amzn-1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.6-amzn-1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.6-amzn-1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.6-amzn-1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.6-amzn-1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.6-amzn-1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.6-amzn-1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.6-amzn-1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.6-amzn-1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.17-amzn-3 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.17-amzn-3 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.17-amzn-3 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.17-amzn-3 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.17-amzn-3 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.17-amzn-3 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-8 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-8 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-8 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-8 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-8 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-8 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-8 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.14.0-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.14.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.14.0-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.14.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.11.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.4.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.5.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.7.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.3 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.3 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,283-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,283-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,283-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 426-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 426-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 426-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.4.1-amzn-2 | Klien baris perintah Spark. | 
| spark-history-server | 3.4.1-amzn-2 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.4.1-amzn-2 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.4.1-amzn-2 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 23.08.1-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-6 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-6 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.15.0 klasifikasi konfigurasi
<a name="emr-6150-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.15.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-java-home | Ubah rumah java KMS Hadoop | Not available. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.15.0 perubahan log
<a name="6150-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.15.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2025-09-03 | Revisi dokumen | Catatan rilis Amazon EMR 6.15.0 menambahkan masalah yang diketahui | 
| 2023-11-17 | Publikasi Docs | Amazon EMR 6.15.0 catatan rilis pertama kali diterbitkan | 
| 2023-11-17 | Penerapan selesai | [Amazon EMR 6.15.0 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-11-13 | Rilis awal | Amazon EMR 6.15.0 pertama kali dikerahkan ke Wilayah komersial awal | 

# Amazon EMR rilis 6.14.0
<a name="emr-6140-release"></a>

## 6.14.0 versi aplikasi
<a name="emr-6140-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.14.0 | emr-6.13.0 | emr-6.12.0 | emr-6.11.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.543 | 1.12.513 | 1.12.490 | 1.12.446 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.4.0 | 2.4.0 | 2.4.0 | 2.2.0 | 
| Flink | 1.17.1-amzn-0 | 1.17.0 | 1.17.0 | 1.16.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.17-amzn-2 | 2.4.17-amzn-1 | 2.4.17-amzn-0 | 2.4.15-amzn-1.1 | 
| HCatalog | 3.1.3-amzn-7 | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 
| Hadoop | 3.3.3-amzn-6 | 3.3.3-amzn-5 | 3.3.3-amzn-4 | 3.3.3-amzn-3.1 | 
| Hive | 3.1.3-amzn-7 | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 
| Hudi | 0.13.1-amzn-2 | 0.13.1-amzn-1 | 0.13.1-amzn-0 | 0.13.0-amzn-0 | 
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 
| Iceberg | 1.3.1-amzn-0 | 1.3.0-amzn-1 | 1.3.0-amzn-0 | 1.2.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.5.0 | 1.5.0 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.3 | 5.1.3 | 5.1.3 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,281-amzn-2 | 0,281-amzn-1 | 0,281-amzn-0 | 0,279 amzn-0 | 
| Spark | 3.4.1-amzn-1 | 3.4.1-amzn-0 | 3.4.0-amzn-0 | 3.3.2-amzn-0.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 
| Tez | 0.10.2-amzn-5 | 0.10.2-amzn-4 | 0.10.2-amzn-3 | 0.10.2-amzn-2.1 | 
| Trino (PrestoSQL) | 422-amzn-0 | 414-amzn-1 | 414-amzn-0 | 410-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan terbitan 6.14.0
<a name="emr-6140-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.14.0. Perubahan relatif terhadap 6.13.0. Untuk informasi tentang timeline rilis, lihat. [6.14.0 perubahan log](#6140-changelog)

**Fitur baru**
+ Amazon EMR 6.14.0 supports Apache Spark 3.4.1, Apache Spark RAPIDS 23.06.0-amzn-2, Flink 1.17.1, Iceberg 1.3.1, and Trino 422.
+ [Penskalaan terkelola Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-scaling.html) sekarang tersedia di Wilayah `ap-southeast-3` Asia Pasifik (Jakarta) untuk klaster yang Anda buat dengan Amazon EMR 6.14.0 dan lebih tinggi.

**Masalah yang diketahui**
+ Skrip instance-state on-cluster yang memantau kesehatan instance dapat mengkonsumsi CPU dan sumber daya memori yang berlebihan ketika ada sejumlah besar thread yang and/or membuka pegangan file pada node.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 
+ Rilis 6.14.0 mengoptimalkan manajemen log dengan Amazon EMR yang berjalan di Amazon EC2. Akibatnya, Anda mungkin melihat sedikit pengurangan biaya penyimpanan untuk log cluster Anda.
+ Rilis 6.14.0 meningkatkan alur kerja penskalaan untuk memperhitungkan instans inti berbeda yang memiliki variasi ukuran substansif untuk volume Amazon EBS mereka. Peningkatan ini hanya berlaku untuk node inti; operasi scale-down untuk node tugas tidak terpengaruh.
+ Rilis 6.14.0 meningkatkan cara Amazon EMR berinteraksi dengan aplikasi sumber terbuka seperti. Apache Hadoop YARN ResourceManager and HDFS NameNode Peningkatan ini mengurangi risiko keterlambatan operasional dengan penskalaan cluster, dan mengurangi kegagalan startup yang terjadi karena masalah konektivitas dengan aplikasi open-source.
+ Rilis 6.14.0 mengoptimalkan instalasi aplikasi pada peluncuran cluster. Ini meningkatkan waktu startup cluster untuk kombinasi tertentu dari aplikasi Amazon EMR.
+ Rilis 6.14.0 memperbaiki masalah di mana operasi penskalaan klaster mungkin terhenti saat cluster yang berjalan di VPC dengan domain khusus menghadapi inti atau node tugas dimulai ulang.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6140-release.html)

## 6.14.0 versi Java default
<a name="emr-6140-jdk"></a>

Amazon EMR merilis 6.12.0 dan lebih tinggi mendukung semua aplikasi dengan Amazon Corretto 8 secara default, kecuali untuk Trino. Untuk Trino, Amazon EMR mendukung Amazon Corretto 17 secara default dimulai dengan rilis Amazon EMR 6.9.0. Amazon EMR juga mendukung beberapa aplikasi dengan Amazon Corretto 11 dan 17. Aplikasi tersebut tercantum dalam tabel berikut. Jika Anda ingin mengubah JVM default pada cluster Anda, ikuti instruksi [Konfigurasikan aplikasi untuk menggunakan Java Virtual Machine tertentu](configuring-java8.md) untuk setiap aplikasi yang berjalan di cluster. Anda hanya dapat menggunakan satu versi runtime Java untuk sebuah cluster. Amazon EMR tidak mendukung menjalankan node atau aplikasi yang berbeda pada versi runtime yang berbeda pada cluster yang sama.

Meskipun Amazon EMR mendukung Amazon Corretto 11 dan 17 di Apache Spark, Apache Hadoop, dan Apache Hive, kinerja mungkin menurun untuk beberapa beban kerja saat Anda menggunakan versi Corretto ini. Kami menyarankan Anda menguji beban kerja Anda sebelum mengubah default.

Tabel berikut menunjukkan versi Java default untuk aplikasi di Amazon EMR 6.14.0:


| Aplikasi | Versi Java/Amazon Corretto (defaultnya tebal) | 
| --- | --- | 
| kuala | 17, 11, 8 | 
| Flink | 11, 8 | 
| Ganglia | 8 | 
| HBase | 11, 8 | 
| HCatalog | 17, 11, 8 | 
| Hadoop | 17, 11, 8 | 
| Hive | 17, 11, 8 | 
| Hudi | 17, 11, 8 | 
| Gunung es | 17, 11, 8 | 
| Livy | 17, 11, 8 | 
| Oozie | 17, 11, 8 | 
| Phoenix | 8 | 
| PrestoDB | 8 | 
| Spark | 17, 11, 8 | 
| Spark RAPIDS | 17, 11, 8 | 
| Sqoop | 8 | 
| Tez | 17, 11, 8 | 
| Trino | 17 | 
| Zeppelin | 8 | 
| Pig | 8 | 
| Zookeeper | 8 | 

## 6.14.0 versi komponen
<a name="emr-6140-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.4.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| delta-standalone-connectors | 0.6.0 | Delta Connectors menyediakan runtime yang berbeda untuk mengintegrasikan Delta Lake dengan mesin seperti Flink, Hive dan Presto. | 
| emr-ddb | 5.1.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.7.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.11.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.28.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.7.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.1.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.59.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.17.1-amzn-0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.17.1-amzn-0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-6 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-6 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-6 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-6 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-6 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-6 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-6 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-6 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-6 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-6 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-6 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.17-amzn-2 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.17-amzn-2 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.17-amzn-2 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.17-amzn-2 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.17-amzn-2 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.17-amzn-2 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-7 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-7 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-7 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-7 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-7 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-7 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-7 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.13.1-amzn-2 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.13.1-amzn-2 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.13.1-amzn-2 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.13.1-amzn-2 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.11.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.3.1-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.5.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.7.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.3 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.3 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,281-amzn-2 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,281-amzn-2 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,281-amzn-2 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 422-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 422-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 422-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.4.1-amzn-1 | Klien baris perintah Spark. | 
| spark-history-server | 3.4.1-amzn-1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.4.1-amzn-1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.4.1-amzn-1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 23.06.0-amzn-2 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-5 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-5 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.14.0 klasifikasi konfigurasi
<a name="emr-6140-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.14.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-java-home | Ubah rumah java KMS Hadoop | Not available. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.14.0 perubahan log
<a name="6140-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.14.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2025-09-03 | Revisi dokumen | Catatan rilis Amazon EMR 6.14.0 menambahkan masalah yang diketahui | 
| *2023-11-02* | Penerapan selesai | [Amazon EMR 6.14.0 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-10-10 | Publikasi Docs | Amazon EMR 6.14.0 catatan rilis pertama kali diterbitkan | 
| 2023-10-04 | Rilis awal | Amazon EMR 6.14.0 pertama kali dikerahkan ke Wilayah komersial awal | 

# Amazon EMR rilis 6.13.0
<a name="emr-6130-release"></a>

## 6.13.0 versi aplikasi
<a name="emr-6130-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.13.0 | emr-6.12.0 | emr-6.11.1 | emr-6.11.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.513 | 1.12.490 | 1.12.446 | 1.12.446 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.4.0 | 2.4.0 | 2.2.0 | 2.2.0 | 
| Flink | 1.17.0 | 1.17.0 | 1.16.0 | 1.16.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.17-amzn-1 | 2.4.17-amzn-0 | 2.4.15-amzn-1.1 | 2.4.15-amzn-1 | 
| HCatalog | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 
| Hadoop | 3.3.3-amzn-5 | 3.3.3-amzn-4 | 3.3.3-amzn-3.1 | 3.3.3-amzn-3 | 
| Hive | 3.1.3-amzn-6 | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 
| Hudi | 0.13.1-amzn-1 | 0.13.1-amzn-0 | 0.13.0-amzn-0 | 0.13.0-amzn-0 | 
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.11.0 | 
| Iceberg | 1.3.0-amzn-1 | 1.3.0-amzn-0 | 1.2.0-amzn-0 | 1.2.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.5.0 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.3 | 5.1.3 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,281-amzn-1 | 0,281-amzn-0 | 0,279 amzn-0 | 0,279 amzn-0 | 
| Spark | 3.4.1-amzn-0 | 3.4.0-amzn-0 | 3.3.2-amzn-0.1 | 3.3.2-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 
| Tez | 0.10.2-amzn-4 | 0.10.2-amzn-3 | 0.10.2-amzn-2.1 | 0.10.2-amzn-2 | 
| Trino (PrestoSQL) | 414-amzn-1 | 414-amzn-0 | 410-amzn-0 | 410-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan rilis 6.13.0
<a name="emr-6130-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.13.0. Perubahan relatif terhadap 6.12.0. Untuk informasi tentang timeline rilis, lihat. [6.13.0 perubahan log](#6130-changelog)

**Fitur baru**
+ Amazon EMR 6.13.0 supports Apache Spark 3.4.1, Apache Spark RAPIDS 23.06.0-amzn-1, CUDA Toolkit 11.8.0, and JupyterHub 1.5.0.

**Masalah yang diketahui**
+ Skrip instance-state on-cluster yang memantau kesehatan instance dapat mengkonsumsi CPU dan sumber daya memori yang berlebihan ketika ada sejumlah besar thread yang and/or membuka pegangan file pada node.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 
+ Rilis 6.13.0 meningkatkan daemon manajemen log EMR Amazon untuk memastikan bahwa semua log diunggah dengan irama reguler ke Amazon S3 saat perintah penghentian klaster dikeluarkan. Ini memfasilitasi penghentian cluster yang lebih cepat.
+ Rilis 6.13.0 meningkatkan kemampuan manajemen log EMR Amazon untuk memastikan pengunggahan semua file log yang konsisten dan tepat waktu ke Amazon S3. Ini terutama menguntungkan cluster EMR yang berjalan lama.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6130-release.html)

## 6.13.0 versi Java default
<a name="emr-6130-jdk"></a>

Amazon EMR merilis 6.12.0 dan lebih tinggi mendukung semua aplikasi dengan Amazon Corretto 8 secara default, kecuali untuk Trino. Untuk Trino, Amazon EMR mendukung Amazon Corretto 17 secara default dimulai dengan rilis Amazon EMR 6.9.0. Amazon EMR juga mendukung beberapa aplikasi dengan Amazon Corretto 11 dan 17. Aplikasi tersebut tercantum dalam tabel berikut. Jika Anda ingin mengubah JVM default pada cluster Anda, ikuti instruksi [Konfigurasikan aplikasi untuk menggunakan Java Virtual Machine tertentu](configuring-java8.md) untuk setiap aplikasi yang berjalan di cluster. Anda hanya dapat menggunakan satu versi runtime Java untuk sebuah cluster. Amazon EMR tidak mendukung menjalankan node atau aplikasi yang berbeda pada versi runtime yang berbeda pada cluster yang sama.

Meskipun Amazon EMR mendukung Amazon Corretto 11 dan 17 di Apache Spark, Apache Hadoop, dan Apache Hive, kinerja mungkin menurun untuk beberapa beban kerja saat Anda menggunakan versi Corretto ini. Kami menyarankan Anda menguji beban kerja Anda sebelum mengubah default.

Tabel berikut menunjukkan versi Java default untuk aplikasi di Amazon EMR 6.13.0:


| Aplikasi | Versi Java/Amazon Corretto (defaultnya tebal) | 
| --- | --- | 
| kuala | 17, 11, 8 | 
| Flink | 11, 8 | 
| Ganglia | 8 | 
| HBase | 11, 8 | 
| HCatalog | 17, 11, 8 | 
| Hadoop | 17, 11, 8 | 
| Hive | 17, 11, 8 | 
| Hudi | 17, 11, 8 | 
| Gunung es | 17, 11, 8 | 
| Livy | 17, 11, 8 | 
| Oozie | 17, 11, 8 | 
| Phoenix | 8 | 
| PrestoDB | 8 | 
| Spark | 17, 11, 8 | 
| Spark RAPIDS | 17, 11, 8 | 
| Sqoop | 8 | 
| Tez | 17, 11, 8 | 
| Trino | 17 | 
| Zeppelin | 8 | 
| Pig | 8 | 
| Zookeeper | 8 | 

## 6.13.0 versi komponen
<a name="emr-6130-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.4.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| delta-standalone-connectors | 0.6.0 | Delta Connectors menyediakan runtime yang berbeda untuk mengintegrasikan Delta Lake dengan mesin seperti Flink, Hive dan Presto. | 
| emr-ddb | 5.1.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.6.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.10.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.27.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.6.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.1.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.58.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.17.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.17.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-5 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-5 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-5 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-5 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-5 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-5 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-5 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-5 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-5 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-5 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-5 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.17-amzn-1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.17-amzn-1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.17-amzn-1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.17-amzn-1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.17-amzn-1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.17-amzn-1 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-6 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-6 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-6 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-6 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-6 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-6 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-6 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.13.1-amzn-1 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.13.1-amzn-1 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.13.1-amzn-1 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.13.1-amzn-1 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.11.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.3.0-amzn-1 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.5.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.7.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.3 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.3 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,281-amzn-1 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,281-amzn-1 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,281-amzn-1 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 414-amzn-1 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 414-amzn-1 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 414-amzn-1 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.4.1-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.4.1-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.4.1-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.4.1-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 23.06.0-amzn-1 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-4 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-4 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.13.0 klasifikasi konfigurasi
<a name="emr-6130-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.13.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-java-home | Ubah rumah java KMS Hadoop | Not available. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.13.0 perubahan log
<a name="6130-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.13.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2025-09-03 | Revisi dokumen | Catatan rilis Amazon EMR 6.13.0 menambahkan masalah yang diketahui | 
| *2023-09-23* | Penerapan selesai | [Amazon EMR 6.13.0 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-09-12 | Publikasi Docs | Amazon EMR 6.13.0 catatan rilis pertama kali diterbitkan | 
| 2023-09-01 | Rilis awal | Amazon EMR 6.13.0 pertama kali dikerahkan ke Wilayah komersial awal | 

# Amazon EMR rilis 6.12.0
<a name="emr-6120-release"></a>

## 6.12.0 versi aplikasi
<a name="emr-6120-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.12.0 | emr-6.11.1 | emr-6.11.0 | emr-6.10.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.490 | 1.12.446 | 1.12.446 | 1.12.397 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.4.0 | 2.2.0 | 2.2.0 | 2.2.0 | 
| Flink | 1.17.0 | 1.16.0 | 1.16.0 | 1.16.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.17-amzn-0 | 2.4.15-amzn-1.1 | 2.4.15-amzn-1 | 2.4.15-amzn-0.1 | 
| HCatalog | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 
| Hadoop | 3.3.3-amzn-4 | 3.3.3-amzn-3.1 | 3.3.3-amzn-3 | 3.3.3-amzn-2.1 | 
| Hive | 3.1.3-amzn-5 | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 
| Hudi | 0.13.1-amzn-0 | 0.13.0-amzn-0 | 0.13.0-amzn-0 | 0.12.2-amzn-0 | 
| Hue | 4.11.0 | 4.11.0 | 4.11.0 | 4.10.0 | 
| Iceberg | 1.3.0-amzn-0 | 1.2.0-amzn-0 | 1.2.0-amzn-0 | 1.1.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.5.0 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.3 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,281-amzn-0 | 0,279 amzn-0 | 0,279 amzn-0 | 0.278.1-amzn-0 | 
| Spark | 3.4.0-amzn-0 | 3.3.2-amzn-0.1 | 3.3.2-amzn-0 | 3.3.1-amzn-0.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 
| Tez | 0.10.2-amzn-3 | 0.10.2-amzn-2.1 | 0.10.2-amzn-2 | 0.10.2-amzn-1.1 | 
| Trino (PrestoSQL) | 414-amzn-0 | 410-amzn-0 | 410-amzn-0 | 403-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan terbitan 6.12.0
<a name="emr-6120-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.12.0. Perubahan relatif terhadap 6.11.0. Untuk informasi tentang timeline rilis, lihat. [6.12.0 perubahan log](#6120-changelog)

**Fitur baru**
+ Amazon EMR 6.12.0 supports Apache Spark 3.4.0, Apache Spark RAPIDS 23.06.0-amzn-0, CUDA 11.8.0, Apache Hudi 0.13.1-amzn-0, Apache Iceberg 1.3.0-amzn-0, Trino 414, and PrestoDB 0.281.
+ Amazon EMR merilis 6.12.0 dan lebih tinggi mendukung integrasi LDAP dengan Apache Livy, Apache Hive hingga HiveServer 2 ()HS2, Trino, Presto, dan Hue. Anda juga dapat menginstal Apache Spark dan Apache Hadoop pada cluster EMR yang menggunakan 6.12.0 atau lebih tinggi dan mengkonfigurasinya untuk menggunakan LDAP. Untuk informasi selengkapnya, lihat [Menggunakan Active Directory atau server LDAP untuk autentikasi dengan Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/ldap.html).

**Masalah yang diketahui**
+ Skrip instance-state on-cluster yang memantau kesehatan instance dapat mengkonsumsi CPU dan sumber daya memori yang berlebihan ketika ada sejumlah besar thread yang and/or membuka pegangan file pada node.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 
+ Amazon EMR merilis 6.12.0 dan yang lebih tinggi memberikan dukungan runtime Java 11 untuk Flink. Untuk informasi selengkapnya, lihat [Konfigurasikan Flink untuk dijalankan dengan Java 11](flink-configure.md#flink-configure-java11).
+ Rilis 6.12.0 menambahkan mekanisme coba lagi baru ke alur kerja penskalaan cluster untuk kluster EMR yang menjalankan Presto atau Trino. Peningkatan ini mengurangi risiko bahwa pengubahan ukuran cluster akan terhenti tanpa batas karena satu operasi pengubahan ukuran yang gagal. Ini juga meningkatkan pemanfaatan cluster, karena kluster Anda naik dan turun lebih cepat.
+ Rilis 6.12.0 memperbaiki masalah di mana operasi penskalaan klaster mungkin terhenti ketika node inti yang mengalami penonaktifan yang anggun berubah tidak sehat karena alasan apa pun sebelum sepenuhnya dinonaktifkan.
+ Rilis 6.12.0 meningkatkan logika scale-down cluster sehingga cluster Anda tidak mencoba menurunkan skala node inti di bawah pengaturan faktor replikasi HDFS untuk cluster. Ini sejalan dengan persyaratan redundansi data Anda, dan mengurangi kemungkinan operasi penskalaan mungkin terhenti.
+ Rilis 6.12.0 meningkatkan kinerja dan efisiensi layanan pemantauan kesehatan untuk Amazon EMR dengan meningkatkan kecepatan pencatatan perubahan status untuk instans. Peningkatan ini mengurangi kemungkinan penurunan kinerja untuk node cluster yang menjalankan beberapa alat klien khusus atau aplikasi pihak ketiga.
+ Rilis 6.12.0 meningkatkan kinerja daemon manajemen log on-cluster untuk Amazon EMR. Akibatnya, ada sedikit peluang untuk kinerja yang menurun dengan cluster EMR yang menjalankan langkah-langkah dengan konkurensi tinggi.
+ Dengan Amazon EMR rilis 6.12.0, daemon manajemen log telah ditingkatkan untuk mengidentifikasi semua log yang digunakan secara aktif dengan pegangan file terbuka pada penyimpanan instans lokal, dan proses terkait. Peningkatan ini memastikan bahwa Amazon EMR menghapus file dengan benar dan merebut kembali ruang penyimpanan setelah log diarsipkan ke Amazon S3.
+ Rilis 6.12.0 mencakup peningkatan daemon manajemen log yang menghapus direktori langkah kosong dan tidak terpakai di sistem file cluster lokal. Sejumlah besar direktori kosong dapat menurunkan kinerja daemon EMR Amazon dan mengakibatkan pemanfaatan disk yang berlebihan.
+ Rilis 6.12.0 memungkinkan rotasi log untuk log YARN Timeline Server. Ini meminimalkan skenario pemanfaatan disk yang berlebihan, terutama untuk cluster yang berjalan lama.
+ Ukuran volume root default telah meningkat menjadi 15 GB di Amazon EMR 6.10.0 dan lebih tinggi. Rilis sebelumnya memiliki ukuran volume root default 10 GB.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6120-release.html)

## 6.12.0 versi Java default
<a name="emr-6120-jdk"></a>

Amazon EMR merilis 6.12.0 dan lebih tinggi mendukung semua aplikasi dengan Amazon Corretto 8 secara default, kecuali untuk Trino. Untuk Trino, Amazon EMR mendukung Amazon Corretto 17 secara default dimulai dengan rilis Amazon EMR 6.9.0. Amazon EMR juga mendukung beberapa aplikasi dengan Amazon Corretto 11 dan 17. Aplikasi tersebut tercantum dalam tabel berikut. Jika Anda ingin mengubah JVM default pada cluster Anda, ikuti instruksi [Konfigurasikan aplikasi untuk menggunakan Java Virtual Machine tertentu](configuring-java8.md) untuk setiap aplikasi yang berjalan di cluster. Anda hanya dapat menggunakan satu versi runtime Java untuk sebuah cluster. Amazon EMR tidak mendukung menjalankan node atau aplikasi yang berbeda pada versi runtime yang berbeda pada cluster yang sama.

Meskipun Amazon EMR mendukung Amazon Corretto 11 dan 17 di Apache Spark, Apache Hadoop, dan Apache Hive, kinerja mungkin menurun untuk beberapa beban kerja saat Anda menggunakan versi Corretto ini. Kami menyarankan Anda menguji beban kerja Anda sebelum mengubah default.

Tabel berikut menunjukkan versi Java default untuk aplikasi di Amazon EMR 6.12.0:


| Aplikasi | Versi Java/Amazon Corretto (defaultnya tebal) | 
| --- | --- | 
| kuala | 17, 11, 8 | 
| Flink | 11, 8 | 
| Ganglia | 8 | 
| HBase | 11, 8 | 
| HCatalog | 17, 11, 8 | 
| Hadoop | 17, 11, 8 | 
| Hive | 17, 11, 8 | 
| Hudi | 17, 11, 8 | 
| Gunung es | 17, 11, 8 | 
| Livy | 17, 11, 8 | 
| Oozie | 17, 11, 8 | 
| Phoenix | 8 | 
| PrestoDB | 8 | 
| Spark | 17, 11, 8 | 
| Spark RAPIDS | 17, 11, 8 | 
| Sqoop | 8 | 
| Tez | 17, 11, 8 | 
| Trino | 17 | 
| Zeppelin | 8 | 
| Pig | 8 | 
| Zookeeper | 8 | 

## 6.12.0 versi komponen
<a name="emr-6120-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.4.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| delta-standalone-connectors | 0.6.0 | Delta Connectors menyediakan runtime yang berbeda untuk mengintegrasikan Delta Lake dengan mesin seperti Flink, Hive dan Presto. | 
| emr-ddb | 5.1.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.5.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.9.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.26.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.5.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.1.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.57.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.17.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.17.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-4 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-4 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-4 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-4 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-4 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-4 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-4 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-4 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-4 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-4 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-4 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.17-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.17-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.17-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.17-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.17-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.17-amzn-0 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-5 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-5 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-5 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-5 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-5 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-5 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-5 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.13.1-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.13.1-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.13.1-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.13.1-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.11.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.3.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.7.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.3 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.3 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,281-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,281-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,281-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 414-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 414-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 414-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.4.0-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.4.0-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.4.0-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.4.0-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 23.06.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-3 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-3 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.12.0 klasifikasi konfigurasi
<a name="emr-6120-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.12.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-java-home | Ubah rumah java KMS Hadoop | Not available. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.12.0 perubahan log
<a name="6120-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.12.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2025-09-03 | Revisi dokumen | Catatan rilis Amazon EMR 6.12.0 menambahkan masalah yang diketahui | 
| 2023-07-27 | Perbarui dokumentasi | Perbarui opsi Java untuk 6.12 dan tambahkan tutorial Oozie untuk memperbarui JVM | 
| 2023-07-21 | Penerapan selesai | [Amazon EMR 6.12.0 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-07-21 | Publikasi Docs | Amazon EMR 6.12.0 catatan rilis pertama kali diterbitkan | 
| 2023-07-12 | Rilis awal | Amazon EMR 6.12.0 pertama kali dikerahkan ke Wilayah komersial awal | 

# Amazon EMR rilis 6.11.1
<a name="emr-6111-release"></a>

## 6.11.1 versi aplikasi
<a name="emr-6111-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.11.1 | emr-6.11.0 | emr-6.10.1 | emr-6.10.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.446 | 1.12.446 | 1.12.397 | 1.12.397 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.2.0 | 2.2.0 | 2.2.0 | 2.2.0 | 
| Flink | 1.16.0 | 1.16.0 | 1.16.0 | 1.16.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.15-amzn-1.1 | 2.4.15-amzn-1 | 2.4.15-amzn-0.1 | 2.4.15-amzn-0 | 
| HCatalog | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 
| Hadoop | 3.3.3-amzn-3.1 | 3.3.3-amzn-3 | 3.3.3-amzn-2.1 | 3.3.3-amzn-2 | 
| Hive | 3.1.3-amzn-4.1 | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 
| Hudi | 0.13.0-amzn-0 | 0.13.0-amzn-0 | 0.12.2-amzn-0 | 0.12.2-amzn-0 | 
| Hue | 4.11.0 | 4.11.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 1.2.0-amzn-0 | 1.2.0-amzn-0 | 1.1.0-amzn-0 | 1.1.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.5.0 | 1.5.0 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,279 amzn-0 | 0,279 amzn-0 | 0.278.1-amzn-0 | 0.278.1-amzn-0 | 
| Spark | 3.3.2-amzn-0.1 | 3.3.2-amzn-0 | 3.3.1-amzn-0.1 | 3.3.1-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.11.0 | 
| Tez | 0.10.2-amzn-2.1 | 0.10.2-amzn-2 | 0.10.2-amzn-1.1 | 0.10.2-amzn-1 | 
| Trino (PrestoSQL) | 410-amzn-0 | 410-amzn-0 | 403-amzn-0 | 403-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan terbitan 6.11.1
<a name="emr-6111-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.11.1. Perubahan relatif terhadap 6.11.0. Untuk informasi tentang timeline rilis, lihat. [6.11.1 perubahan log](#6111-changelog)

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 
+ Karena pertikaian kunci, sebuah node dapat masuk ke dalam kebuntuan jika ditambahkan atau dihapus pada saat yang sama ketika ia mencoba untuk menonaktifkan. Akibatnya, Hadoop Resource Manager (YARN) menjadi tidak responsif, dan memengaruhi semua kontainer yang masuk dan saat ini berjalan.
+ Rilis ini mencakup perubahan yang memungkinkan cluster ketersediaan tinggi pulih dari status gagal setelah restart.
+ Rilis ini mencakup perbaikan keamanan untuk Hue dan. HBase
+ Rilis ini memperbaiki masalah di mana cluster yang menjalankan beban kerja di Spark dengan Amazon EMR mungkin diam-diam menerima hasil yang salah dengan,,, dan. `contains` `startsWith` `endsWith` `like` Masalah ini terjadi saat Anda menggunakan ekspresi pada bidang yang dipartisi yang memiliki metadata di Amazon EMR Hive3 Metastore Server (HMS).
+ Rilis ini memperbaiki masalah dengan pelambatan di sisi Glue ketika tidak ada fungsi yang ditentukan pengguna (UDF).
+ Rilis ini memperbaiki masalah yang menghapus log kontainer oleh layanan agregasi log node sebelum pendorong log dapat mendorongnya ke S3 jika terjadi penonaktifan YARN.
+ Rilis ini memperbaiki masalah dengan metrik FairShare Scheduler saat Node Label diaktifkan untuk Hadoop.
+ Rilis ini memperbaiki masalah yang memengaruhi kinerja Spark saat Anda menetapkan `true` nilai default untuk konfigurasi. `spark.yarn.heterogeneousExecutors.enabled` `spark-defaults.conf`
+ Rilis ini memperbaiki masalah dengan Mengurangi Tugas yang gagal membaca data acak. Masalah ini menyebabkan kegagalan kueri Hive dengan kesalahan memori yang rusak.
+ Rilis ini menambahkan mekanisme coba lagi baru ke alur kerja penskalaan cluster untuk kluster EMR yang menjalankan Presto atau Trino. Peningkatan ini mengurangi risiko bahwa pengubahan ukuran cluster akan terhenti tanpa batas karena satu operasi pengubahan ukuran yang gagal. Ini juga meningkatkan pemanfaatan cluster, karena kluster Anda naik dan turun lebih cepat.
+ Rilis ini meningkatkan logika penskalaan klaster sehingga klaster Anda tidak mencoba menurunkan skala node inti di bawah pengaturan faktor replikasi HDFS untuk cluster. Ini sejalan dengan persyaratan redundansi data Anda, dan mengurangi kemungkinan operasi penskalaan mungkin terhenti.
+ Daemon manajemen log telah ditingkatkan untuk mengidentifikasi semua log yang digunakan secara aktif dengan pegangan file terbuka pada penyimpanan instance lokal, dan proses terkait. Peningkatan ini memastikan bahwa Amazon EMR menghapus file dengan benar dan merebut kembali ruang penyimpanan setelah log diarsipkan ke Amazon S3.
+ Rilis ini mencakup peningkatan daemon manajemen log yang menghapus direktori langkah kosong dan tidak terpakai di sistem file cluster lokal. Sejumlah besar direktori kosong dapat menurunkan kinerja daemon EMR Amazon dan mengakibatkan pemanfaatan disk yang berlebihan.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6111-release.html)

## 6.11.1 versi komponen
<a name="emr-6111-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.2.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| delta-standalone-connectors | 0.6.0 | Delta Connectors menyediakan runtime yang berbeda untuk mengintegrasikan Delta Lake dengan mesin seperti Flink, Hive dan Presto. | 
| emr-ddb | 5.1.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.4.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.8.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.25.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.4.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.1.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.56.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.16.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.16.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-3.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-3.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-3.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-3.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-3.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-3.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-3.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-3.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-3.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-3.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-3.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.15-amzn-1.1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.15-amzn-1.1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.15-amzn-1.1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.15-amzn-1.1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.15-amzn-1.1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.15-amzn-1.1 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-4.1 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-4.1 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-4.1 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-4.1 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-4.1 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-4.1 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-4.1 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.13.0-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.13.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.13.0-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.13.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.11.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.2.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.2 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,279 amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,279 amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,279 amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 410-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 410-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 410-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.2-amzn-0.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.2-amzn-0.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.2-amzn-0.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.2-amzn-0.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 23.02.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-2.1 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-2.1 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.11.1 klasifikasi konfigurasi
<a name="emr-6111-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.11.1**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.11.1 perubahan log
<a name="6111-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.11.1**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-30 | Perbarui catatan rilis | Menambahkan beberapa perbaikan terkait bidang kontrol ke catatan rilis | 
| 2023-08-21 | Publikasi Docs | Amazon EMR 6.11.1 catatan rilis pertama kali diterbitkan | 
| 2023-08-16 | Penerapan selesai | [Amazon EMR 6.11.1 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-08-04 | Rilis awal | Amazon EMR 6.11.1 pertama kali dikerahkan ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.11.0
<a name="emr-6110-release"></a>

## 6.11.0 versi aplikasi
<a name="emr-6110-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.11.0 | emr-6.10.1 | emr-6.10.0 | emr-6.9.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.446 | 1.12.397 | 1.12.397 | 1.12.170 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.2.0 | 2.2.0 | 2.2.0 | 2.1.0 | 
| Flink | 1.16.0 | 1.16.0 | 1.16.0 | 1.15.2 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.15-amzn-1 | 2.4.15-amzn-0.1 | 2.4.15-amzn-0 | 2.4.13-amzn-0.1 | 
| HCatalog | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 
| Hadoop | 3.3.3-amzn-3 | 3.3.3-amzn-2.1 | 3.3.3-amzn-2 | 3.3.3-amzn-1.1 | 
| Hive | 3.1.3-amzn-4 | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 
| Hudi | 0.13.0-amzn-0 | 0.12.2-amzn-0 | 0.12.2-amzn-0 | 0.12.1-amzn-0 | 
| Hue | 4.11.0 | 4.10.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 1.2.0-amzn-0 | 1.1.0-amzn-0 | 1.1.0-amzn-0 | 0.14.1-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.4.1 | 1.5.0 | 1.5.0 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,279 amzn-0 | 0.278.1-amzn-0 | 0.278.1-amzn-0 | 0,276 amzn-0 | 
| Spark | 3.3.2-amzn-0 | 3.3.1-amzn-0.1 | 3.3.1-amzn-0 | 3.3.0-amzn-1.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.11.0 | 2.10.0 | 
| Tez | 0.10.2-amzn-2 | 0.10.2-amzn-1.1 | 0.10.2-amzn-1 | 0.10.2-amzn-0.1 | 
| Trino (PrestoSQL) | 410-amzn-0 | 403-amzn-0 | 403-amzn-0 | 398-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan terbitan 6.11.0
<a name="emr-6110-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.11.0. Perubahan relatif terhadap 6.10.0. Untuk informasi tentang timeline rilis, lihat [log perubahan](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-6110-release.html#6110-changelog).

**Fitur baru**
+ Amazon EMR 6.11.0 mendukung Apache Spark 3.3.2-amzn-0, Apache Spark RAPIDS 23.02.0-amzn-0, CUDA 11.8.0, Apache Hudi 0.13.0-amzn-0, Apache Iceberg 1.2.0-amzn-0, Trino 410-amzn-0, dan PrestoDB 0.279-amzn-0.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 
+ Dengan Amazon EMR 6.11.0, konektor DynamoDB telah ditingkatkan ke versi 5.0.0. Versi 5.0.0 menggunakan. AWS SDK for Java 2.x Rilis sebelumnya menggunakan AWS SDK untuk Java 1.x. Sebagai hasil dari peningkatan ini, kami sangat menyarankan Anda untuk menguji kode Anda sebelum Anda menggunakan konektor DynamoDB dengan Amazon EMR 6.11.
+ Ketika konektor DynamoDB untuk Amazon EMR 6.11.0 memanggil layanan DynamoDB, ia menggunakan nilai Wilayah yang Anda berikan untuk properti. `dynamodb.endpoint` Kami menyarankan Anda juga mengonfigurasi `dynamodb.region` saat Anda menggunakan`dynamodb.endpoint`, dan kedua properti menargetkan hal yang sama Wilayah AWS. Jika Anda menggunakan `dynamodb.endpoint` dan tidak mengonfigurasi`dynamodb.region`, konektor DynamoDB untuk Amazon EMR 6.11.0 akan menampilkan pengecualian Wilayah yang tidak valid dan mencoba merekonsiliasi informasi Anda Wilayah AWS dari layanan metadata instans Amazon EC2 (IMDS). Jika konektor tidak dapat mengambil Region dari IMDS, itu default ke US East (N. Virginia) (). `us-east-1` Kesalahan berikut adalah contoh pengecualian Wilayah tidak valid yang mungkin Anda dapatkan jika Anda tidak mengonfigurasi `dynamodb.region` properti dengan benar: `error software.amazon.awssdk.services.dynamodb.model.DynamoDbException: Credential should be scoped to a valid region.` Untuk informasi selengkapnya tentang kelas yang terpengaruh oleh AWS SDK untuk Java pemutakhiran ke 2.x, lihat Komit [Upgrade AWS SDK untuk Java dari 1.x ke 2.x (\$1175) di GitHub repo untuk](https://github.com/awslabs/emr-dynamodb-connector/commit/1dec9d1972d3673c3fae6c6ea51f19f295147ccf) konektor Amazon EMR - DynamoDB.
+ Rilis ini memperbaiki masalah di mana data kolom menjadi `NULL` ketika Anda menggunakan Delta Lake untuk menyimpan data tabel Delta di Amazon S3 setelah operasi penggantian nama kolom. Untuk informasi lebih lanjut tentang fitur eksperimental ini di Danau Delta, lihat [Operasi ganti nama kolom di Panduan](https://docs.delta.io/latest/delta-batch.html#rename-columns) Pengguna Danau Delta.
+ Rilis 6.11.0 memperbaiki masalah yang mungkin terjadi saat Anda membuat simpul tepi dengan mereplikasi salah satu node utama dari cluster dengan beberapa node primer. Node tepi yang direplikasi dapat menyebabkan penundaan dengan operasi penskalaan, atau mengakibatkan pemanfaatan memori yang tinggi pada node utama. Untuk informasi selengkapnya tentang cara membuat simpul tepi untuk berkomunikasi dengan cluster EMR Anda, lihat [Edge Node Creator](https://github.com/aws-samples/aws-emr-utilities/tree/main/utilities/emr-edge-node-creator) di `aws-samples` repo. GitHub
+ Rilis 6.11.0 meningkatkan proses otomatisasi yang digunakan Amazon EMR untuk memasang kembali volume Amazon EBS ke instance setelah reboot.
+ Rilis 6.11.0 memperbaiki masalah yang mengakibatkan celah intermiten dalam metrik Hadoop yang diterbitkan Amazon EMR ke Amazon. CloudWatch
+ Rilis 6.11.0 memperbaiki masalah dengan kluster EMR di mana pembaruan ke file konfigurasi YARN yang berisi daftar pengecualian node untuk cluster terganggu karena pemanfaatan disk yang berlebihan. Pembaruan yang tidak lengkap menghalangi operasi penskalaan klaster masa depan. Rilis ini memastikan bahwa klaster Anda tetap sehat, dan operasi penskalaan berfungsi seperti yang diharapkan.
+ Ukuran volume root default telah meningkat menjadi 15 GB di Amazon EMR 6.10.0 dan lebih tinggi. Rilis sebelumnya memiliki ukuran volume root default 10 GB.
+ Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

  Dengan Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, nilai ditetapkan untuk mengatasi masalah ini. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml`

  Sementara perbaikan mengatasi masalah yang diperkenalkan oleh YARN-9608, hal itu dapat menyebabkan pekerjaan Hive gagal karena kehilangan data acak pada cluster yang telah mengelola penskalaan diaktifkan. Kami telah mengurangi risiko itu dalam rilis ini dengan juga menyetel `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-shuffle-data` beban kerja Hive. Konfigurasi ini hanya tersedia dengan rilis Amazon EMR 6.11.0 dan yang lebih tinggi.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).
**catatan**  
Rilis ini tidak lagi mendapatkan pembaruan AMI otomatis karena telah digantikan oleh 1 rilis patch lagi. Rilis patch dilambangkan dengan angka setelah titik desimal kedua (). `6.8.1` Untuk melihat apakah Anda menggunakan rilis patch terbaru, periksa rilis yang tersedia di [https://docs.aws.amazon.com/emr/latest/ReleaseGuide](https://docs.aws.amazon.com/emr/latest/ReleaseGuide), atau periksa dropdown **rilis Amazon EMR** saat Anda membuat klaster di konsol, atau gunakan tindakan API [https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html](https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html)atau CLI. [https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html](https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html) Untuk mendapatkan pembaruan tentang rilis baru, berlangganan umpan RSS di [Apa yang baru?](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html) halaman.    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6110-release.html)

## 6.11.0 versi komponen
<a name="emr-6110-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.2.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| delta-standalone-connectors | 0.6.0 | Delta Connectors menyediakan runtime yang berbeda untuk mengintegrasikan Delta Lake dengan mesin seperti Flink, Hive dan Presto. | 
| emr-ddb | 5.1.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.4.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.8.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.25.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.4.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.1.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.56.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.16.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.16.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-3 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-3 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-3 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-3 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-3 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-3 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-3 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-3 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-3 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-3 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-3 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.15-amzn-1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.15-amzn-1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.15-amzn-1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.15-amzn-1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.15-amzn-1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.15-amzn-1 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-4 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-4 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-4 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-4 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-4 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-4 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-4 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.13.0-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.13.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.13.0-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.13.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.11.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.2.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.2 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,279 amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,279 amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,279 amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 410-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 410-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 410-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.2-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.2-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.2-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.2-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 23.02.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-2 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-2 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.11.0 klasifikasi konfigurasi
<a name="emr-6110-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.11.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.11.0 perubahan log
<a name="6110-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.11.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-21 | Perbarui | Masalah tetap diperkenalkan dengan Hadoop 3.3.3. | 
| 2023-07-26 | Perbarui | Label rilis OS baru 2.0.20230612.0 dan2.0.20230628.0. | 
| 2023-06-09 | Penerapan selesai | [Amazon EMR 6.11.0 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-06-09 | Publikasi Docs | Amazon EMR 6.11.0 catatan rilis pertama kali diterbitkan | 
| 2023-06-08 | Rilis awal | Amazon EMR 6.11.0 pertama kali dikerahkan ke Wilayah komersial awal | 

# Amazon EMR rilis 6.10.1
<a name="emr-6101-release"></a>

## 6.10.1 versi aplikasi
<a name="emr-6101-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.10.1 | emr-6.10.0 | emr-6.9.1 | emr-6.9.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.397 | 1.12.397 | 1.12.170 | 1.12.170 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.2.0 | 2.2.0 | 2.1.0 | 2.1.0 | 
| Flink | 1.16.0 | 1.16.0 | 1.15.2 | 1.15.2 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.15-amzn-0.1 | 2.4.15-amzn-0 | 2.4.13-amzn-0.1 | 2.4.13-amzn-0 | 
| HCatalog | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 
| Hadoop | 3.3.3-amzn-2.1 | 3.3.3-amzn-2 | 3.3.3-amzn-1.1 | 3.3.3-amzn-1 | 
| Hive | 3.1.3-amzn-3.1 | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 
| Hudi | 0.12.2-amzn-0 | 0.12.2-amzn-0 | 0.12.1-amzn-0 | 0.12.1-amzn-0 | 
| Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 1.1.0-amzn-0 | 1.1.0-amzn-0 | 0.14.1-amzn-0 | 0.14.1-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.6.0 | 
| JupyterHub | 1.5.0 | 1.5.0 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.278.1-amzn-0 | 0.278.1-amzn-0 | 0,276 amzn-0 | 0,276 amzn-0 | 
| Spark | 3.3.1-amzn-0.1 | 3.3.1-amzn-0 | 3.3.0-amzn-1.1 | 3.3.0-amzn-1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.11.0 | 2.10.0 | 2.10.0 | 
| Tez | 0.10.2-amzn-1.1 | 0.10.2-amzn-1 | 0.10.2-amzn-0.1 | 0.10.2-amzn-0 | 
| Trino (PrestoSQL) | 403-amzn-0 | 403-amzn-0 | 398-amzn-0 | 398-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## 6.10.1 Catatan terbitan
<a name="emr-6101-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.10.1. Perubahan relatif terhadap 6.10.0. Untuk informasi tentang timeline rilis, lihat. [6.10.1 perubahan log](#6101-changelog)

**Masalah yang Diketahui**
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Karena pertikaian kunci, sebuah node dapat masuk ke dalam kebuntuan jika ditambahkan atau dihapus pada saat yang sama ketika ia mencoba untuk menonaktifkan. Akibatnya, Hadoop Resource Manager (YARN) menjadi tidak responsif, dan memengaruhi semua kontainer yang masuk dan saat ini berjalan.
+ Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

  Dengan Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, nilai ditetapkan untuk mengatasi masalah ini. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml`

  Sementara perbaikan mengatasi masalah yang diperkenalkan oleh YARN-9608, hal itu dapat menyebabkan pekerjaan Hive gagal karena kehilangan data acak pada cluster yang telah mengelola penskalaan diaktifkan. Kami telah mengurangi risiko itu dalam rilis ini dengan juga menyetel `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-shuffle-data` beban kerja Hive. Konfigurasi ini hanya tersedia dengan rilis Amazon EMR 6.11.0 dan yang lebih tinggi.
+ Kolektor metrik tidak akan mengirim metrik apa pun ke bidang kontrol setelah failover node primer dalam cluster dengan konfigurasi grup instance.
+ Rilis ini mencakup perubahan yang memungkinkan cluster ketersediaan tinggi pulih dari status gagal setelah restart.
+ Rilis ini mencakup perbaikan keamanan untuk Hue dan. HBase
+ Rilis ini memperbaiki masalah di mana cluster yang menjalankan beban kerja di Spark dengan Amazon EMR mungkin diam-diam menerima hasil yang salah dengan,,, dan. `contains` `startsWith` `endsWith` `like` Masalah ini terjadi saat Anda menggunakan ekspresi pada bidang yang dipartisi yang memiliki metadata di Amazon EMR Hive3 Metastore Server (HMS).
+ Rilis ini memperbaiki masalah dengan pelambatan di sisi Glue ketika tidak ada fungsi yang ditentukan pengguna (UDF).
+ Rilis ini memperbaiki masalah yang menghapus log kontainer oleh layanan agregasi log node sebelum pendorong log dapat mendorongnya ke S3 jika terjadi penonaktifan YARN.
+ Rilis ini memperbaiki masalah dengan metrik FairShare Scheduler saat Node Label diaktifkan untuk Hadoop.
+ Rilis ini memperbaiki masalah yang memengaruhi kinerja Spark saat Anda menetapkan `true` nilai default untuk konfigurasi. `spark.yarn.heterogeneousExecutors.enabled` `spark-defaults.conf`
+ Rilis ini memperbaiki masalah dengan Mengurangi Tugas yang gagal membaca data acak. Masalah ini menyebabkan kegagalan kueri Hive dengan kesalahan memori yang rusak.
+ Rilis ini menambahkan mekanisme coba lagi baru ke alur kerja penskalaan cluster untuk kluster EMR yang menjalankan Presto atau Trino. Peningkatan ini mengurangi risiko bahwa pengubahan ukuran cluster akan terhenti tanpa batas karena satu operasi pengubahan ukuran yang gagal. Ini juga meningkatkan pemanfaatan cluster, karena kluster Anda naik dan turun lebih cepat.
+ Rilis ini meningkatkan logika penskalaan klaster sehingga klaster Anda tidak mencoba menurunkan skala node inti di bawah pengaturan faktor replikasi HDFS untuk cluster. Ini sejalan dengan persyaratan redundansi data Anda, dan mengurangi kemungkinan operasi penskalaan mungkin terhenti.
+ Daemon manajemen log telah ditingkatkan untuk mengidentifikasi semua log yang digunakan secara aktif dengan pegangan file terbuka pada penyimpanan instance lokal, dan proses terkait. Peningkatan ini memastikan bahwa Amazon EMR menghapus file dengan benar dan merebut kembali ruang penyimpanan setelah log diarsipkan ke Amazon S3.
+ Rilis ini mencakup peningkatan daemon manajemen log yang menghapus direktori langkah kosong dan tidak terpakai di sistem file cluster lokal. Sejumlah besar direktori kosong dapat menurunkan kinerja daemon EMR Amazon dan mengakibatkan pemanfaatan disk yang berlebihan.
+ Rilis ini memperbaiki masalah yang mungkin terjadi saat Anda membuat simpul tepi dengan mereplikasi salah satu node utama dari cluster dengan beberapa node primer. Node tepi yang direplikasi dapat menyebabkan penundaan dengan operasi penskalaan, atau mengakibatkan pemanfaatan memori yang tinggi pada node utama. Untuk informasi selengkapnya tentang cara membuat simpul tepi untuk berkomunikasi dengan cluster EMR Anda, lihat [Edge Node Creator](https://github.com/aws-samples/aws-emr-utilities/tree/main/utilities/emr-edge-node-creator) di `aws-samples` repo. GitHub
+ Rilis ini meningkatkan proses otomatisasi yang digunakan Amazon EMR untuk memasang kembali volume Amazon EBS ke instance setelah reboot.
+ Rilis ini memperbaiki masalah yang mengakibatkan celah intermiten dalam metrik Hadoop yang diterbitkan Amazon EMR ke Amazon. CloudWatch
+ Rilis ini memperbaiki masalah dengan kluster EMR di mana pembaruan ke file konfigurasi YARN yang berisi daftar pengecualian node untuk cluster terganggu karena pemanfaatan disk yang berlebihan. Pembaruan yang tidak lengkap menghalangi operasi penskalaan klaster masa depan. Rilis ini memastikan bahwa klaster Anda tetap sehat, dan operasi penskalaan berfungsi seperti yang diharapkan.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6101-release.html)

## 6.10.1 versi komponen
<a name="emr-6101-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.2.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.3.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.7.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.24.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.3.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.0.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.55.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.16.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.16.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-2.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-2.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-2.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-2.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-2.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-2.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-2.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-2.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-2.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-2.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-2.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.15-amzn-0.1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.15-amzn-0.1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.15-amzn-0.1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.15-amzn-0.1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.15-amzn-0.1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.15-amzn-0.1 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-3.1 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-3.1 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-3.1 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-3.1 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-3.1 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-3.1 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-3.1 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.12.2-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.12.2-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.12.2-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.12.2-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.1.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.5.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 6.0.0-SNAPSHOT | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.278.1-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.278.1-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.278.1-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 403-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 403-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 403-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.1-amzn-0.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.1-amzn-0.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.1-amzn-0.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.1-amzn-0.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.12.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-1.1 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-1.1 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.10.1 klasifikasi konfigurasi
<a name="emr-6101-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.10.1**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.10.1 perubahan log
<a name="6101-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.10.1**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-30 | Perbarui catatan rilis | Menambahkan beberapa perbaikan terkait bidang kontrol ke catatan rilis | 
| 2023-08-21 | Publikasi Docs | Amazon EMR 6.10.1 catatan rilis pertama kali diterbitkan | 
| 2023-08-16 | Penerapan selesai | [Amazon EMR 6.10.1 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-08-04 | Rilis awal | Amazon EMR 6.10.1 pertama kali dikerahkan ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.10.0
<a name="emr-6100-release"></a>

## 6.10.0 versi aplikasi
<a name="emr-6100-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.10.0 | emr-6.9.1 | emr-6.9.0 | emr-6.8.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.397 | 1.12.170 | 1.12.170 | 1.12.170 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.2.0 | 2.1.0 | 2.1.0 |  -  | 
| Flink | 1.16.0 | 1.15.2 | 1.15.2 | 1.15.1 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.15-amzn-0 | 2.4.13-amzn-0.1 | 2.4.13-amzn-0 | 2.4.12-amzn-0.1 | 
| HCatalog | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 
| Hadoop | 3.3.3-amzn-2 | 3.3.3-amzn-1.1 | 3.3.3-amzn-1 | 3.2.1-amzn-8.1 | 
| Hive | 3.1.3-amzn-3 | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 
| Hudi | 0.12.2-amzn-0 | 0.12.1-amzn-0 | 0.12.1-amzn-0 | 0.11.1-amzn-0 | 
| Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 1.1.0-amzn-0 | 0.14.1-amzn-0 | 0.14.1-amzn-0 | 0.14.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.6.0 | 2.1.0 | 
| JupyterHub | 1.5.0 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.278.1-amzn-0 | 0,276 amzn-0 | 0,276 amzn-0 | 0.273.3-amzn-0 | 
| Spark | 3.3.1-amzn-0 | 3.3.0-amzn-1.1 | 3.3.0-amzn-1 | 3.3.0-amzn-0.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.11.0 | 2.10.0 | 2.10.0 | 2.9.1 | 
| Tez | 0.10.2-amzn-1 | 0.10.2-amzn-0.1 | 0.10.2-amzn-0 | 0.9.2 | 
| Trino (PrestoSQL) | 403-amzn-0 | 398-amzn-0 | 398-amzn-0 | 388-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## Catatan terbitan 6.10.0
<a name="emr-6100-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.10.0. Perubahan relatif terhadap 6.9.0. Untuk informasi tentang timeline rilis, lihat [log perubahan](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-6100-release.html#6100-changelog).

**Fitur baru**
+ Amazon EMR 6.10.0 mendukung Apache Spark 3.3.1, Apache Spark RAPIDS 22.12.0, CUDA 11.8.0, Apache Hudi 0.12.2-amzn-0, Apache Iceberg 1.1.0-amzn-0, Trino 403, dan PrestoDB 0.278.1.
+ Amazon EMR 6.10.0 menyertakan konektor Trino-Hudi asli yang menyediakan akses baca ke data dalam tabel Hudi. Anda dapat mengaktifkan konektor dengan`trino-cli --catalog hudi`, dan mengkonfigurasi konektor untuk kebutuhan Anda`trino-connector-hudi`. Integrasi asli dengan Amazon EMR berarti Anda tidak perlu lagi menggunakan `trino-connector-hive` untuk menanyakan tabel Hudi. Untuk daftar konfigurasi yang didukung dengan konektor baru, lihat halaman [konektor Hudi](https://trino.io/docs/current/connector/hudi.html) dari dokumentasi Trino.
+ Amazon EMR merilis 6.10.0 dan lebih tinggi mendukung integrasi Apache Zeppelin dengan Apache Flink. Untuk informasi selengkapnya, lihat [Bekerja dengan pekerjaan Flink dari Zeppelin di Amazon EMR](flink-zeppelin.md).

**Masalah yang Diketahui**
+ Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

  Untuk mengatasi masalah ini di Amazon EMR 6.10.0, Anda dapat mengatur nilai ke in. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml` Di Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, konfigurasi disetel ke default untuk menyelesaikan masalah ini. `false`
+  *Dimulai dengan Spark 3.3.1 (didukung dalam EMR versi 6.10 dan yang lebih baru), semua pelaksana dalam host dekomisioning diatur ke yang baru, yang disebut status DECOMMISSIONING. `ExecutorState`* Pelaksana yang dinonaktifkan tidak dapat digunakan oleh Yarn untuk mengalokasikan tugas dan dengan demikian akan meminta pelaksana baru, jika diperlukan, untuk tugas yang sedang dijalankan. Jadi, jika Anda menonaktifkan Spark DRA saat menggunakan EMR Managed Scaling, EMR Auto Scaling, atau mekanisme penskalaan khusus apa pun pada cluster EMR-EC2, maka Yarn dapat meminta pelaksana maksimum yang diizinkan untuk setiap pekerjaan. Untuk menghindari masalah ini, biarkan `spark.dynamicAllocation.enabled` properti disetel ke `TRUE` (yang merupakan default) saat Anda menggunakan kombinasi fitur di atas. Selain itu, Anda juga dapat mengatur batasan pelaksana minimum dan maksimum dengan menetapkan nilai untuk `spark.dynamicAllocation.maxExecutors` dan `spark.dynamicAllocation.minExecutors` properti untuk pekerjaan Spark Anda, untuk membatasi jumlah pelaksana yang dialokasikan selama eksekusi pekerjaan. 

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Amazon EMR 6.10.0 menghapus dependensi [untuk integrasi `minimal-json.jar` Amazon Redshift untuk Apache Spark, dan secara otomatis menambahkan stoples terkait Spark-Redshift](emr-spark-redshift-launch.md) yang diperlukan ke jalur kelas pelaksana untuk Spark:,, dan. `spark-redshift.jar` `spark-avro.jar` `RedshiftJDBC.jar`
+ Rilis 6.10.0 meningkatkan daemon manajemen log on-cluster untuk memantau folder log tambahan di cluster EMR Anda. Peningkatan ini meminimalkan skenario pemanfaatan disk yang berlebihan.
+ Rilis 6.10.0 secara otomatis memulai ulang daemon manajemen log on-cluster saat berhenti. Peningkatan ini mengurangi risiko node tampak tidak sehat karena pemanfaatan disk yang berlebihan. 
+ Amazon EMR 6.10.0 mendukung titik akhir regional untuk pemetaan pengguna EMRFS.
+ Ukuran volume root default telah meningkat menjadi 15 GB di Amazon EMR 6.10.0 dan lebih tinggi. Rilis sebelumnya memiliki ukuran volume root default 10 GB.
+ Rilis 6.10.0 memperbaiki masalah yang menyebabkan pekerjaan Spark terhenti saat semua pelaksana Spark yang tersisa berada di host penonaktifan dengan manajer sumber daya YARN. 
+ Dengan Amazon EMR 6.6.0 hingga 6.9.x, kueri INSERT dengan partisi dinamis dan klausa ORDER BY atau SORT BY akan selalu memiliki dua reduksi. Masalah ini disebabkan oleh perubahan OSS [HIVE-20703](https://issues.apache.org/jira/browse/HIVE-20703), yang menempatkan optimasi partisi pengurutan dinamis di bawah keputusan berbasis biaya. Jika beban kerja Anda tidak memerlukan penyortiran partisi dinamis, kami sarankan Anda mengatur `hive.optimize.sort.dynamic.partition.threshold` properti `-1` untuk menonaktifkan fitur baru dan mendapatkan jumlah reduksi yang dihitung dengan benar. Masalah ini diperbaiki di OSS Hive sebagai bagian dari [HIVE-22269 dan](https://issues.apache.org/jira/browse/HIVE-22269) diperbaiki di Amazon EMR 6.10.0.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).
**catatan**  
Rilis ini tidak lagi mendapatkan pembaruan AMI otomatis karena telah digantikan oleh 1 rilis patch lagi. Rilis patch dilambangkan dengan angka setelah titik desimal kedua (). `6.8.1` Untuk melihat apakah Anda menggunakan rilis patch terbaru, periksa rilis yang tersedia di [https://docs.aws.amazon.com/emr/latest/ReleaseGuide](https://docs.aws.amazon.com/emr/latest/ReleaseGuide), atau periksa dropdown **rilis Amazon EMR** saat Anda membuat klaster di konsol, atau gunakan tindakan API [https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html](https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html)atau CLI. [https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html](https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html) Untuk mendapatkan pembaruan tentang rilis baru, berlangganan umpan RSS di [Apa yang baru?](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html) halaman.    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-6100-release.html)

## 6.10.0 versi komponen
<a name="emr-6100-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.2.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.3.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.7.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.24.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.3.0 | EMR S3Select Connector | 
| emr-wal-cli | 1.0.0 | Cli digunakan untuk daftar emrwal/penghapusan. | 
| emrfs | 2.55.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.16.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.16.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-2 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-2 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-2 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-2 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-2 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-2 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-2 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-2 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-2 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-2 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-2 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.15-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.15-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.15-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.15-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.15-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.15-amzn-0 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-3 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-3 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-3 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-3 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-3 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-3 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-3 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.12.2-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.12.2-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.12.2-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.12.2-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 1.1.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.5.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.8.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 6.0.0-SNAPSHOT | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.278.1-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.278.1-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.278.1-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 403-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 403-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 403-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.1-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.1-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.1-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.1-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.12.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.11.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-1 | Aplikasi dan perpustakaan tez YARN. | 
| tez-on-worker | 0.10.2-amzn-1 | Aplikasi dan pustaka YARN tez untuk node pekerja. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.10.0 klasifikasi konfigurasi
<a name="emr-6100-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.10.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hudi | Ubah nilai dalam file hudi.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-logback | Ubah nilai dalam file kms-logback.xml dari Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.10.0 perubahan log
<a name="6100-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.10.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-21 | Perbarui | Menambahkan masalah yang diketahui diperkenalkan dengan Hadoop 3.3.3. | 
| 2023-07-26 | Perbarui | Label rilis OS baru 2.0.20230612.0 dan2.0.20230628.0. | 
| 2023-03-02 | Penerapan selesai | [Amazon EMR 6.10 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-03-02 | Publikasi Docs | Amazon EMR 6.10 catatan rilis pertama kali diterbitkan | 
| 2023-02-27 | Rilis awal | Amazon EMR 6.10 dikerahkan ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.9.1
<a name="emr-691-release"></a>

## 6.9.1 versi aplikasi
<a name="emr-691-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.9.1 | emr-6.9.0 | emr-6.8.1 | emr-6.8.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.170 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.1.0 | 2.1.0 |  -  |  -  | 
| Flink | 1.15.2 | 1.15.2 | 1.15.1 | 1.15.1 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.13-amzn-0.1 | 2.4.13-amzn-0 | 2.4.12-amzn-0.1 | 2.4.12-amzn-0 | 
| HCatalog | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 
| Hadoop | 3.3.3-amzn-1.1 | 3.3.3-amzn-1 | 3.2.1-amzn-8.1 | 3.2.1-amzn-8 | 
| Hive | 3.1.3-amzn-2.1 | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 
| Hudi | 0.12.1-amzn-0 | 0.12.1-amzn-0 | 0.11.1-amzn-0 | 0.11.1-amzn-0 | 
| Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 0.14.1-amzn-0 | 0.14.1-amzn-0 | 0.14.0-amzn-0 | 0.14.0-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.6.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.9.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,276 amzn-0 | 0,276 amzn-0 | 0.273.3-amzn-0 | 0.273.3-amzn-0 | 
| Spark | 3.3.0-amzn-1.1 | 3.3.0-amzn-1 | 3.3.0-amzn-0.1 | 3.3.0-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.10.0 | 2.10.0 | 2.9.1 | 2.9.1 | 
| Tez | 0.10.2-amzn-0.1 | 0.10.2-amzn-0 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 398-amzn-0 | 398-amzn-0 | 388-amzn-0 | 388-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.1 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.10 | 

## 6.9.1 Catatan rilis
<a name="emr-691-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.9.1. Perubahan relatif terhadap 6.9.0. Untuk informasi tentang timeline rilis, lihat. [6.9.1 perubahan log](#691-changelog)

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

  Dengan Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, nilai ditetapkan untuk mengatasi masalah ini. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml`

  Sementara perbaikan mengatasi masalah yang diperkenalkan oleh YARN-9608, hal itu dapat menyebabkan pekerjaan Hive gagal karena kehilangan data acak pada cluster yang telah mengelola penskalaan diaktifkan. Kami telah mengurangi risiko itu dalam rilis ini dengan juga menyetel `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-shuffle-data` beban kerja Hive. Konfigurasi ini hanya tersedia dengan rilis Amazon EMR 6.11.0 dan yang lebih tinggi.
+ Kolektor metrik tidak akan mengirim metrik apa pun ke bidang kontrol setelah failover node primer dalam cluster dengan konfigurasi grup instance.
+ Rilis ini menghilangkan percobaan ulang pada permintaan HTTP yang gagal ke titik akhir kolektor metrik.
+ Rilis ini mencakup perubahan yang memungkinkan cluster ketersediaan tinggi pulih dari status gagal setelah restart.
+ Rilis ini memperbaiki masalah di mana pengguna besar yang dibuat UIDs menyebabkan pengecualian overflow.
+ Rilis ini memperbaiki masalah batas waktu dengan proses konfigurasi ulang Amazon EMR.
+ Rilis ini mencakup perbaikan keamanan.
+ Rilis ini memperbaiki masalah di mana cluster yang menjalankan beban kerja di Spark dengan Amazon EMR mungkin diam-diam menerima hasil yang salah dengan,,, dan. `contains` `startsWith` `endsWith` `like` Masalah ini terjadi saat Anda menggunakan ekspresi pada bidang yang dipartisi yang memiliki metadata di Amazon EMR Hive3 Metastore Server (HMS).
+ Dengan Amazon EMR 6.6.0 hingga 6.9.x, kueri INSERT dengan partisi dinamis dan klausa ORDER BY atau SORT BY akan selalu memiliki dua reduksi. Masalah ini disebabkan oleh perubahan OSS [HIVE-20703](https://issues.apache.org/jira/browse/HIVE-20703), yang menempatkan optimasi partisi pengurutan dinamis di bawah keputusan berbasis biaya. Jika beban kerja Anda tidak memerlukan penyortiran partisi dinamis, kami sarankan Anda mengatur `hive.optimize.sort.dynamic.partition.threshold` properti `-1` untuk menonaktifkan fitur baru dan mendapatkan jumlah reduksi yang dihitung dengan benar. Masalah ini diperbaiki di OSS Hive sebagai bagian dari [HIVE-22269 dan](https://issues.apache.org/jira/browse/HIVE-22269) diperbaiki di Amazon EMR 6.10.0.
+ Hive mungkin mengalami kehilangan data ketika Anda menggunakan HDFS sebagai direktori awal dan Anda telah mengaktifkan menggabungkan file kecil, dan tabel berisi jalur partisi statis.
+ Rilis ini memperbaiki masalah kinerja dengan Hive jika menggabungkan file kecil (dinonaktifkan secara default) diaktifkan di akhir pekerjaan ETL.
+ Rilis ini memperbaiki masalah dengan pelambatan di sisi Glue ketika tidak ada fungsi yang ditentukan pengguna (UDF).
+ Rilis ini memperbaiki masalah yang menghapus log kontainer oleh layanan agregasi log node sebelum pendorong log dapat mendorongnya ke S3 jika terjadi penonaktifan YARN.
+ Rilis ini memperbaiki penanganan file yang dipadat/diarsipkan dengan pelacakan file penyimpanan persisten untuk. HBase
+ Rilis ini memperbaiki masalah yang memengaruhi kinerja Spark saat Anda menetapkan `true` nilai default untuk konfigurasi. `spark.yarn.heterogeneousExecutors.enabled` `spark-defaults.conf`
+ Rilis ini memperbaiki masalah dengan Mengurangi Tugas yang gagal membaca data acak. Masalah ini menyebabkan kegagalan kueri Hive dengan kesalahan memori yang rusak.
+ Rilis ini memperbaiki masalah yang menyebabkan penyedia node gagal jika layanan HDFS NameNode (NN) macet di safemode selama penggantian node.
+ Rilis ini menambahkan mekanisme coba lagi baru ke alur kerja penskalaan cluster untuk kluster EMR yang menjalankan Presto atau Trino. Peningkatan ini mengurangi risiko bahwa pengubahan ukuran cluster akan terhenti tanpa batas karena satu operasi pengubahan ukuran yang gagal. Ini juga meningkatkan pemanfaatan cluster, karena kluster Anda naik dan turun lebih cepat.
+ Rilis ini meningkatkan logika penskalaan klaster sehingga klaster Anda tidak mencoba menurunkan skala node inti di bawah pengaturan faktor replikasi HDFS untuk cluster. Ini sejalan dengan persyaratan redundansi data Anda, dan mengurangi kemungkinan operasi penskalaan mungkin terhenti.
+ Daemon manajemen log telah ditingkatkan untuk mengidentifikasi semua log yang digunakan secara aktif dengan pegangan file terbuka pada penyimpanan instance lokal, dan proses terkait. Peningkatan ini memastikan bahwa Amazon EMR menghapus file dengan benar dan merebut kembali ruang penyimpanan setelah log diarsipkan ke Amazon S3.
+ Rilis ini mencakup peningkatan daemon manajemen log yang menghapus direktori langkah kosong dan tidak terpakai di sistem file cluster lokal. Sejumlah besar direktori kosong dapat menurunkan kinerja daemon EMR Amazon dan mengakibatkan pemanfaatan disk yang berlebihan.
+ Rilis ini memperbaiki masalah yang mungkin terjadi saat Anda membuat simpul tepi dengan mereplikasi salah satu node utama dari cluster dengan beberapa node primer. Node tepi yang direplikasi dapat menyebabkan penundaan dengan operasi penskalaan, atau mengakibatkan pemanfaatan memori yang tinggi pada node utama. Untuk informasi selengkapnya tentang cara membuat simpul tepi untuk berkomunikasi dengan cluster EMR Anda, lihat [Edge Node Creator](https://github.com/aws-samples/aws-emr-utilities/tree/main/utilities/emr-edge-node-creator) di `aws-samples` repo. GitHub
+ Rilis ini meningkatkan proses otomatisasi yang digunakan Amazon EMR untuk memasang kembali volume Amazon EBS ke instance setelah reboot.
+ Rilis ini memperbaiki masalah yang mengakibatkan celah intermiten dalam metrik Hadoop yang diterbitkan Amazon EMR ke Amazon. CloudWatch
+ Rilis ini memperbaiki masalah dengan kluster EMR di mana pembaruan ke file konfigurasi YARN yang berisi daftar pengecualian node untuk cluster terganggu karena pemanfaatan disk yang berlebihan. Pembaruan yang tidak lengkap menghalangi operasi penskalaan klaster masa depan. Rilis ini memastikan bahwa klaster Anda tetap sehat, dan operasi penskalaan berfungsi seperti yang diharapkan.
+ Rilis ini meningkatkan daemon manajemen log on-cluster untuk memantau folder log tambahan di kluster EMR Anda. Peningkatan ini meminimalkan skenario pemanfaatan disk yang berlebihan.
+ Rilis ini secara otomatis me-restart daemon manajemen log on-cluster ketika berhenti. Peningkatan ini mengurangi risiko node tampak tidak sehat karena pemanfaatan disk yang berlebihan. 
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-691-release.html)

## 6.9.1 versi komponen
<a name="emr-691-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.1.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.3.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.6.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.23.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.2.0 | EMR S3Select Connector | 
| emrfs | 2.54.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.15.2 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.15.2 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-1.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-1.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-1.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-1.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-1.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-1.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-1.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-1.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-1.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-1.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-1.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.13-amzn-0.1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.13-amzn-0.1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.13-amzn-0.1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.13-amzn-0.1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.13-amzn-0.1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.13-amzn-0.1 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-2.1 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-2.1 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-2.1 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-2.1 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-2.1 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-2.1 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-2.1 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.12.1-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.12.1-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.12.1-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.12.1-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.14.1-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.7.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 6.0.0-SNAPSHOT | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,276 amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,276 amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,276 amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 398-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 398-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 398-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.0-amzn-1.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.0-amzn-1.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.0-amzn-1.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.0-amzn-1.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.08.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.10.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-0.1 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.9.1 klasifikasi konfigurasi
<a name="emr-691-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.9.1**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.9.1 perubahan log
<a name="691-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.9.1**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-30 | Perbarui catatan rilis | Menambahkan beberapa perbaikan terkait bidang kontrol ke catatan rilis | 
| 2023-08-21 | Publikasi Docs | Amazon EMR 6.9.1 catatan rilis pertama kali diterbitkan | 
| 2023-08-16 | Penerapan selesai | [Amazon EMR 6.9.1 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-08-04 | Rilis awal | Amazon EMR 6.9.1 pertama kali dikerahkan ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.9.0
<a name="emr-690-release"></a>

## 6.9.0 versi aplikasi
<a name="emr-690-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://delta.io/](https://delta.io/), [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.9.0 | emr-6.8.1 | emr-6.8.0 | emr-6.7.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.170 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.15 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta | 2.1.0 |  -  |  -  |  -  | 
| Flink | 1.15.2 | 1.15.1 | 1.15.1 | 1.14.2 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.13-amzn-0 | 2.4.12-amzn-0.1 | 2.4.12-amzn-0 | 2.4.4-amzn-3 | 
| HCatalog | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 
| Hadoop | 3.3.3-amzn-1 | 3.2.1-amzn-8.1 | 3.2.1-amzn-8 | 3.2.1-amzn-7 | 
| Hive | 3.1.3-amzn-2 | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 
| Hudi | 0.12.1-amzn-0 | 0.11.1-amzn-0 | 0.11.1-amzn-0 | 0.11.0-amzn-0 | 
| Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 0.14.1-amzn-0 | 0.14.0-amzn-0 | 0.14.0-amzn-0 | 0.13.1-amzn-0 | 
| JupyterEnterpriseGateway | 2.6.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.9.1 | 1.8.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,276 amzn-0 | 0.273.3-amzn-0 | 0.273.3-amzn-0 | 0,272-amzn-0 | 
| Spark | 3.3.0-amzn-1 | 3.3.0-amzn-0.1 | 3.3.0-amzn-0 | 3.2.1-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.10.0 | 2.9.1 | 2.9.1 | 2.4.1 | 
| Tez | 0.10.2-amzn-0 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 398-amzn-0 | 388-amzn-0 | 388-amzn-0 | 378-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.1 | 0.10.0 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.10 | 3.5.7 | 

## Catatan rilis 6.9.0
<a name="emr-690-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.9.0. Perubahan relatif terhadap Amazon EMR rilis 6.8.0. Untuk informasi tentang timeline rilis, lihat [log perubahan](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-690-release.html#690-changelog).

**Fitur Baru**
+ Amazon EMR rilis 6.9.0 mendukung Apache Spark RAPIDS 22.08.0, Apache Hudi 0.12.1, Apache Iceberg 0.14.1, Trino 398, dan Tez 0.10.2.
+ Amazon EMR rilis 6.9.0 menyertakan aplikasi open-source baru, 2.1.0. [Danau Delta](emr-delta.md)
+ Integrasi Amazon Redshift untuk Apache Spark disertakan dalam rilis Amazon EMR 6.9.0 dan yang lebih baru. Sebelumnya alat open-source, integrasi asli adalah konektor Spark yang dapat Anda gunakan untuk membangun aplikasi Apache Spark yang membaca dan menulis ke data di Amazon Redshift dan Amazon Redshift Serverless. Untuk informasi selengkapnya, lihat [Menggunakan integrasi Amazon Redshift untuk Apache Spark dengan Amazon EMR](emr-spark-redshift.md).
+ Amazon EMR rilis 6.9.0 menambahkan dukungan untuk pengarsipan log ke Amazon S3 selama penskalaan klaster turun. Sebelumnya, Anda hanya dapat mengarsipkan file log ke Amazon S3 selama penghentian klaster. Kemampuan baru memastikan bahwa file log yang dihasilkan di cluster tetap ada di Amazon S3 bahkan setelah node dihentikan. Untuk informasi selengkapnya, lihat [Mengkonfigurasi logging dan debug klaster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-debugging.html).
+ Untuk mendukung kueri yang berjalan lama, Trino sekarang menyertakan mekanisme eksekusi yang toleran terhadap kesalahan. Eksekusi toleran kesalahan mengurangi kegagalan kueri dengan mencoba kembali kueri yang gagal atau tugas komponennya.
+ Anda dapat menggunakan Apache Flink di Amazon EMR untuk menyatukan `BATCH` dan `STREAM` memproses Tabel Apache Hive atau metadata dari semua sumber meja Flink seperti Gunung Es, Kinesis, atau Kafka. Anda dapat menentukan Katalog Data AWS Glue sebagai metastore untuk Flink menggunakan Konsol Manajemen AWS,, AWS CLI atau Amazon EMR API. Untuk informasi selengkapnya, lihat [Mengkonfigurasi Flink di Amazon EMR](flink-configure.md).
+ Sekarang Anda dapat menentukan peran runtime AWS Identity and Access Management (IAM) dan kontrol akses AWS Lake Formation berbasis untuk kueri Apache Spark, Apache Hive, dan Presto di Amazon EMR pada kluster EC2 dengan Amazon AI Studio. SageMaker Untuk informasi selengkapnya, lihat [Mengonfigurasi peran runtime untuk langkah-langkah EMR Amazon](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-steps-runtime-roles.html). 

**Masalah yang Diketahui**
+ Untuk Amazon EMR rilis 6.9.0, Trino tidak bekerja pada cluster yang diaktifkan untuk Apache Ranger. Jika Anda perlu menggunakan Trino dengan Ranger, hubungi. [Dukungan](https://console.aws.amazon.com/support/home#/)
+ Jika Anda menggunakan integrasi Amazon Redshift untuk Apache Spark dan memiliki waktu, jadwal, stempel waktu, atau timestamptz dengan presisi mikrodetik dalam format Parket, konektor membulatkan nilai waktu ke nilai milidetik terdekat. Sebagai solusinya, gunakan parameter format pembongkaran teks. `unload_s3_format`
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, atur `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`
+ **Koneksi ke kluster EMR Amazon dari Amazon SageMaker AI Studio mungkin sebentar-sebentar gagal dengan kode respons 403 Forbidden.** Kesalahan ini terjadi ketika pengaturan peran IAM di cluster membutuhkan waktu lebih dari 60 detik. Sebagai solusinya, Anda dapat menginstal patch EMR Amazon untuk mengaktifkan percobaan ulang dan meningkatkan batas waktu hingga minimal 300 detik. Gunakan langkah-langkah berikut untuk menerapkan tindakan bootstrap saat Anda meluncurkan cluster Anda.

  1.  Unduh skrip bootstrap dan file RPM dari Amazon URIs S3 berikut.

     ```
     s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/gcsc/replace-rpms.sh
     s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/gcsc/emr-secret-agent-1.18.0-SNAPSHOT20221121212949.noarch.rpm
     ```

  1. Unggah file dari langkah sebelumnya ke bucket Amazon S3 yang Anda miliki. Ember harus berada di tempat yang sama Wilayah AWS di mana Anda berencana untuk meluncurkan cluster.

  1. Sertakan tindakan bootstrap berikut saat Anda meluncurkan cluster EMR Anda. Ganti *bootstrap\$1URI* dan *RPM\$1URI* dengan yang sesuai URIs dari Amazon S3. 

     ```
     --bootstrap-actions "Path=bootstrap_URI,Args=[RPM_URI]"
     ```
+ Dengan Amazon EMR merilis 5.36.0 dan 6.6.0 hingga 6.9.0, `SecretAgent` dan komponen `RecordServer` layanan mungkin mengalami kehilangan data log karena konfigurasi pola nama file yang salah di properti Log4j2. Konfigurasi yang salah menyebabkan komponen menghasilkan hanya satu file log per hari. Ketika strategi rotasi terjadi, ia menimpa file yang ada alih-alih menghasilkan file log baru seperti yang diharapkan. Sebagai solusinya, gunakan tindakan bootstrap untuk menghasilkan file log setiap jam dan tambahkan bilangan bulat kenaikan otomatis dalam nama file untuk menangani rotasi.

  Untuk Amazon EMR 6.6.0 hingga 6.9.0 rilis, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster. 

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-6x/replace-puppet.sh,Args=[]"
  ```

  Untuk Amazon EMR 5.36.0, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster.

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-5x/replace-puppet.sh,Args=[]"
  ```
+ Apache Flink menyediakan Native S3 FileSystem dan Hadoop FileSystem Connectors, yang memungkinkan aplikasi membuat FileSink dan menulis data ke Amazon S3. Ini FileSink gagal dengan salah satu dari dua pengecualian berikut.

  ```
  java.lang.UnsupportedOperationException: Recoverable writers on Hadoop are only supported for HDFS
  ```

  ```
  Caused by: java.lang.NoSuchMethodError: org.apache.hadoop.io.retry.RetryPolicies.retryOtherThanRemoteAndSaslException(Lorg/apache/hadoop/io/retry/RetryPolicy;Ljava/util/Map;)Lorg/apache/hadoop/io/retry/RetryPolicy;
                                          at org.apache.hadoop.yarn.client.RMProxy.createRetryPolicy(RMProxy.java:302) ~[hadoop-yarn-common-3.3.3-amzn-0.jar:?]
  ```

  Sebagai solusinya, Anda dapat menginstal patch EMR Amazon, yang memperbaiki masalah di atas di Flink. Untuk menerapkan tindakan bootstrap saat Anda meluncurkan cluster Anda, selesaikan langkah-langkah berikut.

  1. Unduh flink-rpm ke bucket Amazon S3 Anda. Jalur RPM Anda adalah`s3://DOC-EXAMPLE-BUCKET/rpms/flink/`.

  1. Unduh skrip bootstrap dan file RPM dari Amazon S3 menggunakan URI berikut. Ganti `regionName` dengan Wilayah AWS tempat Anda berencana untuk meluncurkan cluster.

     ```
     s3://emr-data-access-control-regionName/customer-bootstrap-actions/gcsc/replace-rpms.sh
     ```

  1. Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Di Amazon EMR 6.8.0 dan 6.9.0, pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

     Dengan [Amazon EMR 6.10.0](emr-6100-release.md#emr-6100-relnotes), ada solusi untuk masalah ini untuk menetapkan nilai ke in. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml` Di Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, konfigurasi disetel ke default untuk menyelesaikan masalah ini. `false`

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Untuk Amazon EMR rilis 6.9.0 dan yang lebih baru, semua komponen yang diinstal oleh Amazon EMR yang menggunakan pustaka Log4j menggunakan Log4j versi 2.17.1 atau yang lebih baru.
+ Saat Anda menggunakan konektor DynamoDB dengan Spark di Amazon EMR versi 6.6.0, 6.7.0, dan 6.8.0, semua pembacaan dari tabel Anda mengembalikan hasil kosong, meskipun pemisahan input mereferensikan data yang tidak kosong. Amazon EMR rilis 6.9.0 memperbaiki masalah ini.
+ Amazon EMR 6.9.0 menambahkan dukungan terbatas untuk kontrol akses berbasis Lake Formation dengan Apache Hudi saat membaca data menggunakan Spark SQL. Dukungan ini untuk kueri SELECT menggunakan Spark SQL dan terbatas pada kontrol akses tingkat kolom. Untuk informasi lebih lanjut, lihat [Hudi dan Lake Formation](https://docs.aws.amazon.com/emr/latest/ManagementGuide/hudi-with-lake-formation.html).
+ Bila Anda menggunakan Amazon EMR 6.9.0 untuk membuat klaster Hadoop dengan [Node Labels](https://hadoop.apache.org/docs/current/hadoop-yarn/hadoop-yarn-site/NodeLabel.html) diaktifkan, [API metrik YARN](https://hadoop.apache.org/docs/current/hadoop-yarn/hadoop-yarn-site/ResourceManagerRest.html#Cluster_Metrics_API) mengembalikan informasi agregat di semua partisi, bukan partisi default. Untuk informasi lebih lanjut, lihat [YARN-11414](https://issues.apache.org/jira/browse/YARN-11414).
+ Dengan Amazon EMR rilis 6.9.0, kami telah memperbarui Trino ke versi 398, yang menggunakan Java 17. Versi Trino yang didukung sebelumnya untuk Amazon EMR 6.8.0 adalah Trino 388 yang berjalan di Java 11. Untuk informasi lebih lanjut tentang perubahan ini, lihat [pembaruan Trino ke Java 17](https://trino.io/blog/2022/07/14/trino-updates-to-java-17.html) di blog Trino.
+ Rilis ini memperbaiki masalah ketidakcocokan urutan waktu antara Apache BigTop dan Amazon EMR pada urutan startup cluster EC2. Ketidakcocokan urutan waktu ini terjadi ketika sistem mencoba melakukan dua atau lebih operasi pada saat yang sama alih-alih melakukannya dalam urutan yang tepat. Akibatnya, konfigurasi cluster tertentu mengalami timeout startup instance dan waktu startup cluster yang lebih lambat.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).
**catatan**  
Rilis ini tidak lagi mendapatkan pembaruan AMI otomatis karena telah digantikan oleh 1 rilis patch lagi. Rilis patch dilambangkan dengan angka setelah titik desimal kedua (). `6.8.1` Untuk melihat apakah Anda menggunakan rilis patch terbaru, periksa rilis yang tersedia di [https://docs.aws.amazon.com/emr/latest/ReleaseGuide](https://docs.aws.amazon.com/emr/latest/ReleaseGuide), atau periksa dropdown **rilis Amazon EMR** saat Anda membuat klaster di konsol, atau gunakan tindakan API [https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html](https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html)atau CLI. [https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html](https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html) Untuk mendapatkan pembaruan tentang rilis baru, berlangganan umpan RSS di [Apa yang baru?](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html) halaman.    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-690-release.html)

## 6.9.0 versi komponen
<a name="emr-690-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| delta | 2.1.0 | Danau Delta adalah format tabel terbuka untuk kumpulan data analitik yang sangat besar | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.3.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.6.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.23.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.2.0 | EMR S3Select Connector | 
| emrfs | 2.54.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.15.2 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.15.2 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.3.3-amzn-1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.3.3-amzn-1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.3.3-amzn-1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.3.3-amzn-1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.3.3-amzn-1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.3.3-amzn-1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.3.3-amzn-1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.3.3-amzn-1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.3.3-amzn-1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.3.3-amzn-1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.3.3-amzn-1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.13-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.13-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.13-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.13-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.13-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.13-amzn-0 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-2 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-2 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-2 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-2 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-2 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-2 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-2 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.12.1-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.12.1-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.12.1-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.12.1-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.14.1-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.7.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 6.0.0-SNAPSHOT | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 6.0.0 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,276 amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,276 amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,276 amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 398-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 398-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 398-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.0-amzn-1 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.0-amzn-1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.0-amzn-1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.0-amzn-1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.08.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.10.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.10.2-amzn-0 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.9.0 klasifikasi konfigurasi
<a name="emr-690-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.9.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| delta-defaults | Ubah nilai dalam file delta-defaults.conf Delta. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j2 | Ubah pengaturan Livy log4j2.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-lakeformation | Ubah nilai dalam file lakeformation.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-delta | Ubah nilai dalam file delta.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-exchange-manager | Ubah nilai dalam file exchange-manager.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.9.0 perubahan log
<a name="690-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.9.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-30 | Perbarui catatan rilis | Menambahkan perbaikan untuk masalah ketidakcocokan urutan waktu | 
| 2023-08-21 | Perbarui catatan rilis | Menambahkan masalah yang diketahui dengan Hadoop 3.3.3. | 
| 2023-07-26 | Perbarui | Label rilis OS baru 2.0.20230612.0 dan2.0.20230628.0. | 
| 2022-12-13 | Catatan rilis diperbarui | Menambahkan fitur dan masalah yang diketahui untuk runtime dengan AI SageMaker  | 
| 2022-11-29 | Catatan rilis dan dokumentasi diperbarui | Menambahkan fitur untuk integrasi Amazon Redshift untuk Apache Spark | 
| 2022-11-23 | Catatan rilis diperbarui | Dihapus entri Log4j | 
| 2022-11-18 | Penerapan selesai | [Amazon EMR 6.9 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2022-11-18 | Publikasi Docs | Amazon EMR 6.9 catatan rilis pertama kali diterbitkan | 
| 2022-11-14 | Rilis awal | Amazon EMR 6.9 dikerahkan ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.8.1
<a name="emr-681-release"></a>

## 6.8.1 versi aplikasi
<a name="emr-681-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.8.1 | emr-6.8.0 | emr-6.7.0 | emr-6.6.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.170 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.15 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.15.1 | 1.15.1 | 1.14.2 | 1.14.2 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.12-amzn-0.1 | 2.4.12-amzn-0 | 2.4.4-amzn-3 | 2.4.4-amzn-2 | 
| HCatalog | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 
| Hadoop | 3.2.1-amzn-8.1 | 3.2.1-amzn-8 | 3.2.1-amzn-7 | 3.2.1-amzn-6 | 
| Hive | 3.1.3-amzn-1.1 | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 
| Hudi | 0.11.1-amzn-0 | 0.11.1-amzn-0 | 0.11.0-amzn-0 | 0.10.1-amzn-0 | 
| Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.10.0 | 
| Iceberg | 0.14.0-amzn-0 | 0.14.0-amzn-0 | 0.13.1-amzn-0 | 0.13.1 | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.9.1 | 1.8.0 | 1.8.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.273.3-amzn-0 | 0.273.3-amzn-0 | 0,272-amzn-0 | 0,267-amzn-0 | 
| Spark | 3.3.0-amzn-0.1 | 3.3.0-amzn-0 | 3.2.1-amzn-0 | 3.2.0-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.9.1 | 2.9.1 | 2.4.1 | 2.4.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 388-amzn-0 | 388-amzn-0 | 378-amzn-0 | 367-amzn-0 | 
| Zeppelin | 0.10.1 | 0.10.1 | 0.10.0 | 0.10.0 | 
| ZooKeeper | 3.5.10 | 3.5.10 | 3.5.7 | 3.5.7 | 

## 6.8.1 catatan rilis
<a name="emr-681-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.8.1. Perubahan relatif terhadap 6.8.0. Untuk informasi tentang timeline rilis, lihat. [6.8.1 perubahan log](#681-changelog)

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

  Dengan Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, nilai ditetapkan untuk mengatasi masalah ini. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml`

  Sementara perbaikan mengatasi masalah yang diperkenalkan oleh YARN-9608, hal itu dapat menyebabkan pekerjaan Hive gagal karena kehilangan data acak pada cluster yang telah mengelola penskalaan diaktifkan. Kami telah mengurangi risiko itu dalam rilis ini dengan juga menyetel `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-shuffle-data` beban kerja Hive. Konfigurasi ini hanya tersedia dengan rilis Amazon EMR 6.11.0 dan yang lebih tinggi.
+ Kolektor metrik tidak akan mengirim metrik apa pun ke bidang kontrol setelah failover node primer dalam cluster dengan konfigurasi grup instance.
+ Rilis ini menghilangkan percobaan ulang pada permintaan HTTP yang gagal ke titik akhir kolektor metrik.
+ Rilis ini mencakup perubahan yang memungkinkan cluster ketersediaan tinggi pulih dari status gagal setelah restart.
+ Rilis ini memperbaiki masalah di mana pengguna besar yang dibuat UIDs menyebabkan pengecualian overflow.
+ Rilis ini memperbaiki masalah batas waktu dengan proses konfigurasi ulang Amazon EMR.
+ Rilis ini mencegah masalah di mana konfigurasi ulang yang gagal dapat merusak proses lain yang tidak terkait.
+ Rilis ini mencakup perbaikan keamanan.
+ Rilis ini memperbaiki masalah di mana cluster yang menjalankan beban kerja di Spark dengan Amazon EMR mungkin diam-diam menerima hasil yang salah dengan,,, dan. `contains` `startsWith` `endsWith` `like` Masalah ini terjadi saat Anda menggunakan ekspresi pada bidang yang dipartisi yang memiliki metadata di Amazon EMR Hive3 Metastore Server (HMS).
+ Dengan Amazon EMR 6.6.0 hingga 6.9.x, kueri INSERT dengan partisi dinamis dan klausa ORDER BY atau SORT BY akan selalu memiliki dua reduksi. Masalah ini disebabkan oleh perubahan OSS [HIVE-20703](https://issues.apache.org/jira/browse/HIVE-20703), yang menempatkan optimasi partisi pengurutan dinamis di bawah keputusan berbasis biaya. Jika beban kerja Anda tidak memerlukan penyortiran partisi dinamis, kami sarankan Anda mengatur `hive.optimize.sort.dynamic.partition.threshold` properti `-1` untuk menonaktifkan fitur baru dan mendapatkan jumlah reduksi yang dihitung dengan benar. Masalah ini diperbaiki di OSS Hive sebagai bagian dari [HIVE-22269 dan](https://issues.apache.org/jira/browse/HIVE-22269) diperbaiki di Amazon EMR 6.10.0.
+ Hive mungkin mengalami kehilangan data ketika Anda menggunakan HDFS sebagai direktori awal dan Anda telah mengaktifkan menggabungkan file kecil, dan tabel berisi jalur partisi statis.
+ Rilis ini memperbaiki masalah kinerja dengan Hive jika menggabungkan file kecil (dinonaktifkan secara default) diaktifkan di akhir pekerjaan ETL.
+ Rilis ini memperbaiki masalah dengan pelambatan di sisi Glue ketika tidak ada fungsi yang ditentukan pengguna (UDF).
+ Rilis ini memperbaiki masalah yang menghapus log kontainer oleh layanan agregasi log node sebelum pendorong log dapat mendorongnya ke S3 jika terjadi penonaktifan YARN.
+ Rilis ini memperbaiki penanganan file yang dipadat/diarsipkan dengan pelacakan file penyimpanan persisten untuk. HBase
+ Rilis ini memperbaiki masalah yang memengaruhi kinerja Spark saat Anda menetapkan `true` nilai default untuk konfigurasi. `spark.yarn.heterogeneousExecutors.enabled` `spark-defaults.conf`
+ Rilis ini memperbaiki masalah dengan Mengurangi Tugas yang gagal membaca data acak. Masalah ini menyebabkan kegagalan kueri Hive dengan kesalahan memori yang rusak.
+ Rilis ini memperbaiki masalah yang menyebabkan penyedia node gagal jika layanan HDFS NameNode (NN) macet di safemode selama penggantian node.
+ Rilis ini menambahkan mekanisme coba lagi baru ke alur kerja penskalaan klaster untuk kluster EMR yang menjalankan Presto atau Trino. Peningkatan ini mengurangi risiko bahwa pengubahan ukuran cluster akan terhenti tanpa batas karena satu operasi pengubahan ukuran yang gagal. Ini juga meningkatkan pemanfaatan cluster, karena kluster Anda naik dan turun lebih cepat.
+ Rilis ini meningkatkan logika penskalaan klaster sehingga klaster Anda tidak mencoba menurunkan skala node inti di bawah pengaturan faktor replikasi HDFS untuk cluster. Ini sejalan dengan persyaratan redundansi data Anda, dan mengurangi kemungkinan operasi penskalaan mungkin terhenti.
+ Daemon manajemen log telah ditingkatkan untuk mengidentifikasi semua log yang digunakan secara aktif dengan pegangan file terbuka pada penyimpanan instance lokal, dan proses terkait. Peningkatan ini memastikan bahwa Amazon EMR menghapus file dengan benar dan merebut kembali ruang penyimpanan setelah log diarsipkan ke Amazon S3.
+ Rilis ini mencakup peningkatan daemon manajemen log yang menghapus direktori langkah kosong dan tidak terpakai di sistem file cluster lokal. Sejumlah besar direktori kosong dapat menurunkan kinerja daemon EMR Amazon dan mengakibatkan pemanfaatan disk yang berlebihan.
+ Rilis ini memperbaiki masalah yang mungkin terjadi saat Anda membuat simpul tepi dengan mereplikasi salah satu node utama dari cluster dengan beberapa node primer. Node tepi yang direplikasi dapat menyebabkan penundaan dengan operasi penskalaan, atau mengakibatkan pemanfaatan memori yang tinggi pada node utama. Untuk informasi selengkapnya tentang cara membuat simpul tepi untuk berkomunikasi dengan cluster EMR Anda, lihat [Edge Node Creator](https://github.com/aws-samples/aws-emr-utilities/tree/main/utilities/emr-edge-node-creator) di `aws-samples` repo. GitHub
+ Rilis ini meningkatkan proses otomatisasi yang digunakan Amazon EMR untuk memasang kembali volume Amazon EBS ke instance setelah reboot.
+ Rilis ini memperbaiki masalah yang mengakibatkan celah intermiten dalam metrik Hadoop yang diterbitkan Amazon EMR ke Amazon. CloudWatch
+ Rilis ini memperbaiki masalah dengan kluster EMR di mana pembaruan ke file konfigurasi YARN yang berisi daftar pengecualian node untuk cluster terganggu karena pemanfaatan disk yang berlebihan. Pembaruan yang tidak lengkap menghalangi operasi penskalaan klaster masa depan. Rilis ini memastikan bahwa klaster Anda tetap sehat, dan operasi penskalaan berfungsi seperti yang diharapkan.
+ Rilis ini meningkatkan daemon manajemen log on-cluster untuk memantau folder log tambahan di kluster EMR Anda. Peningkatan ini meminimalkan skenario pemanfaatan disk yang berlebihan.
+ Rilis ini secara otomatis me-restart daemon manajemen log on-cluster ketika berhenti. Peningkatan ini mengurangi risiko node tampak tidak sehat karena pemanfaatan disk yang berlebihan. 
+ Rilis ini menambahkan dukungan untuk pengarsipan log ke Amazon S3 selama penskalaan klaster turun. Sebelumnya, Anda hanya dapat mengarsipkan file log ke Amazon S3 selama penghentian klaster. Kemampuan baru memastikan bahwa file log yang dihasilkan di cluster tetap ada di Amazon S3 bahkan setelah node dihentikan. Untuk informasi selengkapnya, lihat [Mengkonfigurasi logging dan debug klaster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-debugging.html).
+ Rilis ini memperbaiki masalah yang terjadi saat URI Amazon S3 untuk tindakan bootstrap diakhiri dengan nomor port, misalnya:. `a.b.c.d:4345` Amazon EMR salah menguraikan ini URIs, jadi tindakan bootstrap terkait apa pun akan gagal.
+ Rilis ini memperbaiki masalah ketidakcocokan urutan waktu antara Apache BigTop dan Amazon EMR pada urutan startup cluster EC2. Ketidakcocokan urutan waktu ini terjadi ketika sistem mencoba melakukan dua atau lebih operasi pada saat yang sama alih-alih melakukannya dalam urutan yang tepat. Akibatnya, konfigurasi cluster tertentu mengalami timeout startup instance dan waktu startup cluster yang lebih lambat.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-681-release.html)

## 6.8.1 versi komponen
<a name="emr-681-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.22.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.53.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.15.1 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.15.1 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-8.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-8.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-8.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-8.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-8.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-8.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-8.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-8.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-8.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-8.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-8.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.12-amzn-0.1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.12-amzn-0.1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.12-amzn-0.1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.12-amzn-0.1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.12-amzn-0.1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.12-amzn-0.1 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-1.1 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-1.1 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-1.1 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-1.1 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-1.1 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-1.1 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-1.1 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.11.1-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.11.1-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.11.1-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.11.1-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.14.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.7.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.2 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 5.1.2 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.273.3-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.273.3-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.273.3-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 388-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 388-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 388-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.0-amzn-0.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.0-amzn-0.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.0-amzn-0.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.0-amzn-0.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.06.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.9.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.8.1 klasifikasi konfigurasi
<a name="emr-681-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.8.1**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.8.1 perubahan log
<a name="681-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.8.1**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-30 | Perbarui catatan rilis | Menambahkan beberapa perbaikan terkait bidang kontrol ke catatan rilis | 
| 2023-08-21 | Publikasi Docs | Amazon EMR 6.8.1 catatan rilis pertama kali diterbitkan | 
| 2023-08-16 | Penerapan selesai | [Amazon EMR 6.8.1 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2023-08-04 | Rilis awal | Amazon EMR 6.8.1 pertama kali dikerahkan ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.8.0
<a name="emr-680-release"></a>

## 6.8.0 versi aplikasi
<a name="emr-680-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.8.0 | emr-6.7.0 | emr-6.6.0 | emr-6.5.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.170 | 1.12.170 | 1.12.170 | 1.12.31 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.15 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.15.1 | 1.14.2 | 1.14.2 | 1.14.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.12-amzn-0 | 2.4.4-amzn-3 | 2.4.4-amzn-2 | 2.4.4-amzn-1 | 
| HCatalog | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 
| Hadoop | 3.2.1-amzn-8 | 3.2.1-amzn-7 | 3.2.1-amzn-6 | 3.2.1-amzn-5 | 
| Hive | 3.1.3-amzn-1 | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 
| Hudi | 0.11.1-amzn-0 | 0.11.0-amzn-0 | 0.10.1-amzn-0 | 0.9.0-amzn-1 | 
| Hue | 4.10.0 | 4.10.0 | 4.10.0 | 4.9.0 | 
| Iceberg | 0.14.0-amzn-0 | 0.13.1-amzn-0 | 0.13.1 | 0.12.0 | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.9.1 | 1.8.0 | 1.8.0 | 1.8.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.273.3-amzn-0 | 0,272-amzn-0 | 0,267-amzn-0 | 0,261-amzn-0 | 
| Spark | 3.3.0-amzn-0 | 3.2.1-amzn-0 | 3.2.0-amzn-0 | 3.1.2-amzn-1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.9.1 | 2.4.1 | 2.4.1 | 2.4.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 388-amzn-0 | 378-amzn-0 | 367-amzn-0 | 360 | 
| Zeppelin | 0.10.1 | 0.10.0 | 0.10.0 | 0.10.0 | 
| ZooKeeper | 3.5.10 | 3.5.7 | 3.5.7 | 3.5.7 | 

## Catatan rilis 6.8.0
<a name="emr-680-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.8.0. Perubahan relatif terhadap 6.7.0.

**Fitur Baru**
+ Fitur langkah EMR Amazon sekarang mendukung titik akhir dan klien Apache Livy. JDBC/ODBC Untuk informasi selengkapnya, lihat [Mengonfigurasi peran runtime untuk langkah-langkah EMR Amazon](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-steps-runtime-roles.html).
+ Amazon EMR rilis 6.8.0 hadir dengan rilis Apache 2.4.12. HBase Dengan HBase rilis ini, Anda dapat mengarsipkan dan menghapus HBase tabel Anda. Proses arsip Amazon S3 mengganti nama semua file tabel ke direktori arsip. Ini bisa menjadi proses yang mahal dan panjang. Sekarang, Anda dapat melewati proses arsip dan dengan cepat menjatuhkan dan menghapus tabel besar. Untuk informasi selengkapnya, lihat [Menggunakan HBase shell](emr-hbase-connect.md).

**Masalah yang Diketahui**
+ Hadoop 3.3.3 memperkenalkan perubahan pada YARN ([YARN-9608](https://issues.apache.org/jira/browse/YARN-9608)) yang membuat node tempat kontainer berjalan dalam keadaan dekomisioning hingga aplikasi selesai. Perubahan ini memastikan bahwa data lokal seperti data acak tidak hilang, dan Anda tidak perlu menjalankan kembali pekerjaan. Di Amazon EMR 6.8.0 dan 6.9.0, pendekatan ini juga dapat menyebabkan kurangnya pemanfaatan sumber daya pada cluster dengan atau tanpa penskalaan terkelola diaktifkan.

  Dengan [Amazon EMR 6.10.0](emr-6100-release.md#emr-6100-relnotes), ada solusi untuk masalah ini untuk menetapkan nilai ke in. `yarn.resourcemanager.decommissioning-nodes-watcher.wait-for-applications` `false` `yarn-site.xml` Di Amazon EMR merilis 6.11.0 dan yang lebih tinggi serta 6.8.1, 6.9.1, dan 6.10.1, konfigurasi disetel ke default untuk menyelesaikan masalah ini. `false`

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Ketika Amazon EMR merilis 6.5.0, 6.6.0, atau 6.7.0 membaca tabel Apache Phoenix melalui shell Apache Spark, Amazon EMR menghasilkan file. `NoSuchMethodError` Amazon EMR rilis 6.8.0 memperbaiki masalah ini.
+ Amazon EMR rilis 6.8.0 hadir dengan [Apache Hudi 0.11.1](https://hudi.apache.org/); Namun, Amazon EMR 6.8.0 cluster juga kompatibel dengan open-source dari Hudi 0.12.0. `hudi-spark3.3-bundle_2.12`
+ Amazon EMR rilis 6.8.0 hadir dengan Apache Spark 3.3.0. Rilis Spark ini menggunakan Apache Log4j 2 dan `log4j2.properties` file untuk mengkonfigurasi Log4j dalam proses Spark. Jika Anda menggunakan Spark di cluster atau membuat kluster EMR dengan parameter konfigurasi kustom, dan Anda ingin meningkatkan ke Amazon EMR rilis 6.8.0, Anda harus bermigrasi ke klasifikasi konfigurasi `spark-log4j2` baru dan format kunci untuk Apache Log4j 2. Untuk informasi selengkapnya, lihat [Migrasi dari Apache Log4j 1.x ke Log4j 2.x](emr-spark-configure.md#spark-migrate-logj42).
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).
**catatan**  
Rilis ini tidak lagi mendapatkan pembaruan AMI otomatis karena telah digantikan oleh 1 rilis patch lagi. Rilis patch dilambangkan dengan angka setelah titik desimal kedua (). `6.8.1` Untuk melihat apakah Anda menggunakan rilis patch terbaru, periksa rilis yang tersedia di [https://docs.aws.amazon.com/emr/latest/ReleaseGuide](https://docs.aws.amazon.com/emr/latest/ReleaseGuide), atau periksa dropdown **rilis Amazon EMR** saat Anda membuat klaster di konsol, atau gunakan tindakan API [https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html](https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html)atau CLI. [https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html](https://docs.aws.amazon.com/cli/latest/reference/emr/list-release-labels.html) Untuk mendapatkan pembaruan tentang rilis baru, berlangganan umpan RSS di [Apa yang baru?](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-whatsnew.html) halaman.    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-680-release.html)

**Masalah yang Diketahui**
+ Saat Anda menggunakan konektor DynamoDB dengan Spark di Amazon EMR versi 6.6.0, 6.7.0, dan 6.8.0, semua pembacaan dari tabel Anda mengembalikan hasil kosong, meskipun pemisahan input mereferensikan data yang tidak kosong. Ini karena Spark 3.2.0 disetel `spark.hadoopRDD.ignoreEmptySplits` ke `true` default. Sebagai solusinya, setel secara eksplisit ke. `spark.hadoopRDD.ignoreEmptySplits` `false` Amazon EMR rilis 6.9.0 memperbaiki masalah ini.
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`
+ Dengan Amazon EMR merilis 5.36.0 dan 6.6.0 hingga 6.9.0, `SecretAgent` dan komponen `RecordServer` layanan mungkin mengalami kehilangan data log karena konfigurasi pola nama file yang salah di properti Log4j2. Konfigurasi yang salah menyebabkan komponen menghasilkan hanya satu file log per hari. Ketika strategi rotasi terjadi, ia menimpa file yang ada alih-alih menghasilkan file log baru seperti yang diharapkan. Sebagai solusinya, gunakan tindakan bootstrap untuk menghasilkan file log setiap jam dan tambahkan bilangan bulat kenaikan otomatis dalam nama file untuk menangani rotasi.

  Untuk Amazon EMR 6.6.0 hingga 6.9.0 rilis, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster. 

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-6x/replace-puppet.sh,Args=[]"
  ```

  Untuk Amazon EMR 5.36.0, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster.

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-5x/replace-puppet.sh,Args=[]"
  ```

Untuk informasi selengkapnya tentang timeline rilis, lihat [log perubahan](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-680-release.html#680-changelog).

## 6.8.0 versi komponen
<a name="emr-680-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.2 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.7.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.22.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.53.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.15.1 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.15.1 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-8 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-8 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-8 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-8 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-8 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-8 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-8 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-8 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-8 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-8 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-8 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.12-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.12-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.12-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.12-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.12-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.12-amzn-0 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-1 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-1 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-1 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-1 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-1 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-1 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-1 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.11.1-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.11.1-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.11.1-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.11.1-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.14.0-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.9.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.7.0 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.2 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 5.1.2 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.273.3-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.273.3-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.273.3-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 388-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 388-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 388-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.3.0-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.3.0-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.3.0-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.3.0-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.06.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.9.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.10 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.10 | ZooKeeper klien baris perintah. | 

## 6.8.0 klasifikasi konfigurasi
<a name="emr-680-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.8.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j2 | Ubah nilai dalam file log4j2.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

## 6.8.0 perubahan log
<a name="680-changelog"></a>


**Ubah log untuk catatan rilis dan rilis 6.8.0**  

| Date | Peristiwa | Deskripsi | 
| --- | --- | --- | 
| 2023-08-21 | Perbarui | Menambahkan masalah yang diketahui dengan Hadoop 3.3.3. | 
| 2023-07-26 | Perbarui | Label rilis OS baru 2.0.20230612.0 dan2.0.20230628.0. | 
| 2022-09-06 | Penerapan selesai | [Amazon EMR 6.8 sepenuhnya diterapkan ke semua Wilayah yang didukung](https://aws.amazon.com/about-aws/global-infrastructure/regional-product-services/) | 
| 2022-09-06 | Publikasi awal | Amazon EMR 6.8 catatan rilis pertama kali diterbitkan | 
| 2022-08-31 | Rilis awal | Amazon EMR 6.8 dirilis ke Wilayah komersial terbatas | 

# Amazon EMR rilis 6.7.0
<a name="emr-670-release"></a>

## 6.7.0 versi aplikasi
<a name="emr-670-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.7.0 | emr-6.6.0 | emr-6.5.0 | emr-6.4.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.170 | 1.12.170 | 1.12.31 | 1.12.31 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.15 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.14.2 | 1.14.2 | 1.14.0 | 1.13.1 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.4-amzn-3 | 2.4.4-amzn-2 | 2.4.4-amzn-1 | 2.4.4-amzn-0 | 
| HCatalog | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 
| Hadoop | 3.2.1-amzn-7 | 3.2.1-amzn-6 | 3.2.1-amzn-5 | 3.2.1-amzn-4 | 
| Hive | 3.1.3-amzn-0 | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 
| Hudi | 0.11.0-amzn-0 | 0.10.1-amzn-0 | 0.9.0-amzn-1 | 0.8.0-amzn-0 | 
| Hue | 4.10.0 | 4.10.0 | 4.9.0 | 4.9.0 | 
| Iceberg | 0.13.1-amzn-0 | 0.13.1 | 0.12.0 |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.4.1 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 
| MXNet | 1.8.0 | 1.8.0 | 1.8.0 | 1.8.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.1.2 | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,272-amzn-0 | 0,267-amzn-0 | 0,261-amzn-0 | 0.254.1-amzn-0 | 
| Spark | 3.2.1-amzn-0 | 3.2.0-amzn-0 | 3.1.2-amzn-1 | 3.1.2-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 378-amzn-0 | 367-amzn-0 | 360 | 359 | 
| Zeppelin | 0.10.0 | 0.10.0 | 0.10.0 | 0.9.0 | 
| ZooKeeper | 3.5.7 | 3.5.7 | 3.5.7 | 3.5.7 | 

## Catatan rilis 6.7.0
<a name="emr-670-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.7.0. Perubahan relatif terhadap 6.6.0.

Tanggal rilis awal: 15 Juli 2022

**Fitur Baru**
+ Amazon EMR sekarang mendukung Apache Spark 3.2.1, Apache Hive 3.1.3, HUDI 0.11, PrestoDB 0.272, dan Trino 0.378.
+ Mendukung kontrol akses berbasis Peran IAM dan Lake Formation dengan langkah-langkah EMR (Spark, Hive) untuk Amazon EMR pada kluster EC2.
+ Mendukung pernyataan definisi data Apache Spark pada cluster yang diaktifkan Apache Ranger. Ini sekarang termasuk dukungan untuk aplikasi Trino membaca dan menulis metadata Apache Hive pada kluster yang diaktifkan Apache Ranger. Untuk informasi selengkapnya, lihat [Mengaktifkan tata kelola federasi menggunakan Trino dan Apache Ranger di](https://aws.amazon.com/blogs/big-data/enable-federated-governance-using-trino-and-apache-ranger-on-amazon-emr/) Amazon EMR.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-670-release.html)

**Masalah yang Diketahui**
+ Ketika Amazon EMR merilis 6.5.0, 6.6.0, atau 6.7.0 membaca tabel Apache Phoenix melalui shell Apache Spark, terjadi karena Amazon EMR menggunakan yang `NoSuchMethodError` salah. `Hbase.compat.version` Amazon EMR rilis 6.8.0 memperbaiki masalah ini.
+ Saat Anda menggunakan konektor DynamoDB dengan Spark di Amazon EMR versi 6.6.0, 6.7.0, dan 6.8.0, semua pembacaan dari tabel Anda mengembalikan hasil kosong, meskipun pemisahan input mereferensikan data yang tidak kosong. Ini karena Spark 3.2.0 disetel `spark.hadoopRDD.ignoreEmptySplits` ke `true` default. Sebagai solusinya, setel secara eksplisit ke. `spark.hadoopRDD.ignoreEmptySplits` `false` Amazon EMR rilis 6.9.0 memperbaiki masalah ini.
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`
+ Dengan Amazon EMR merilis 5.36.0 dan 6.6.0 hingga 6.9.0, `SecretAgent` dan komponen `RecordServer` layanan mungkin mengalami kehilangan data log karena konfigurasi pola nama file yang salah di properti Log4j2. Konfigurasi yang salah menyebabkan komponen menghasilkan hanya satu file log per hari. Ketika strategi rotasi terjadi, ia menimpa file yang ada alih-alih menghasilkan file log baru seperti yang diharapkan. Sebagai solusinya, gunakan tindakan bootstrap untuk menghasilkan file log setiap jam dan tambahkan bilangan bulat kenaikan otomatis dalam nama file untuk menangani rotasi.

  Untuk Amazon EMR 6.6.0 hingga 6.9.0 rilis, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster. 

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-6x/replace-puppet.sh,Args=[]"
  ```

  Untuk Amazon EMR 5.36.0, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster.

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-5x/replace-puppet.sh,Args=[]"
  ```
+ `GetClusterSessionCredentials`API tidak didukung dengan cluster yang berjalan di Amazon EMR 6.7 atau lebih rendah.
+ Komit Hadoop berikut di-backport.

  - [[HADOOP-16080]](https://issues.apache.org/jira/browse/HADOOP-16080) Perbaiki masalah jika tidak berfungsi. `hadoop-aws` `hadoop-client-api`

  - [[HADOOP-18237]](https://issues.apache.org/jira/browse/HADOOP-18237) Tingkatkan Apache Xerces Java ke 2.12.2.

  - [[YARN-11092]](https://issues.apache.org/jira/browse/YARN-11092) Tingkatkan jquery ke ui ke 1.13.1.

  - [[YARN-10720]](https://issues.apache.org/jira/browse/YARN-10720) YARN WebAppProxyServlet harus mendukung batas waktu koneksi untuk mencegah server proxy macet.

## 6.7.0 versi komponen
<a name="emr-670-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.6.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.22.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.52.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.14.2 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.14.2 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-7 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-7 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-7 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-7 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-7 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-7 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-7 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-7 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-7 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-7 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-7 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.4-amzn-3 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.4-amzn-3 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.4-amzn-3 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.4-amzn-3 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.4-amzn-3 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.4-amzn-3 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.3-amzn-0 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.3-amzn-0 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.3-amzn-0 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.3-amzn-0 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.3-amzn-0 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.3-amzn-0 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.3-amzn-0 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.11.0-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.11.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.11.0-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.11.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.13.1-amzn-0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.8.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.0.194 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.2 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 5.1.2 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,272-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,272-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,272-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 378-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 378-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 378-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.2.1-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.2.1-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.2.1-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.2.1-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.02.0-amzn-1 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.4.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.0 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.7 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.7 | ZooKeeper klien baris perintah. | 

## 6.7.0 klasifikasi konfigurasi
<a name="emr-670-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.7.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.6.0
<a name="emr-660-release"></a>

## 6.6.0 versi aplikasi
<a name="emr-660-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.6.0 | emr-6.5.0 | emr-6.4.0 | emr-6.3.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.170 | 1.12.31 | 1.12.31 | 1.11.977 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.14.2 | 1.14.0 | 1.13.1 | 1.12.1 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.4-amzn-2 | 2.4.4-amzn-1 | 2.4.4-amzn-0 | 2.2.6-amzn-1 | 
| HCatalog | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 
| Hadoop | 3.2.1-amzn-6 | 3.2.1-amzn-5 | 3.2.1-amzn-4 | 3.2.1-amzn-3.1 | 
| Hive | 3.1.2-amzn-7 | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 
| Hudi | 0.10.1-amzn-0 | 0.9.0-amzn-1 | 0.8.0-amzn-0 | 0.7.0-amzn-0 | 
| Hue | 4.10.0 | 4.9.0 | 4.9.0 | 4.9.0 | 
| Iceberg | 0.13.1 | 0.12.0 |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.4.1 | 1.2.2 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.0-incubating | 
| MXNet | 1.8.0 | 1.8.0 | 1.8.0 | 1.7.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.1.2 | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,267-amzn-0 | 0,261-amzn-0 | 0.254.1-amzn-0 | 0.245.1-amzn-0 | 
| Spark | 3.2.0-amzn-0 | 3.1.2-amzn-1 | 3.1.2-amzn-0 | 3.1.1-amzn-0.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 367-amzn-0 | 360 | 359 | 350 | 
| Zeppelin | 0.10.0 | 0.10.0 | 0.9.0 | 0.9.0 | 
| ZooKeeper | 3.5.7 | 3.5.7 | 3.5.7 | 3.4.14 | 

## 6.6.0 catatan rilis
<a name="emr-660-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.6.0. Perubahan relatif terhadap 6.5.0.

Tanggal rilis awal: 9 Mei 2022

Tanggal dokumentasi yang diperbarui: Juni 15, 2022

**Fitur Baru**
+ Amazon EMR 6.6 sekarang mendukung Apache Spark 3.2, Apache Spark RAPIDS 22.02, CUDA 11, Apache Hudi 0.10.1, Apache Iceberg 0.13, Trino 0.367 dan PrestODB 0.267.
+ Saat Anda meluncurkan cluster dengan *rilis patch terbaru* Amazon EMR 5.36 atau lebih tinggi, 6.6 atau lebih tinggi, atau 7.0 atau lebih tinggi, Amazon EMR menggunakan rilis Amazon Linux 2023 atau Amazon Linux 2 terbaru untuk AMI EMR Amazon default. Untuk informasi selengkapnya, lihat [Menggunakan AMI Amazon Linux default untuk Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-default-ami.html).    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-660-release.html)
+ [Dengan Amazon EMR 6.6 dan yang lebih baru, aplikasi yang menggunakan Log4j 1.x dan Log4j 2.x ditingkatkan untuk menggunakan Log4j 1.2.17 (atau lebih tinggi) dan Log4j 2.17.1 (atau lebih tinggi) masing-masing, dan tidak perlu menggunakan tindakan bootstrap yang disediakan untuk mengurangi masalah CVE.](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-log4j-vulnerability.html)
+ **[Penskalaan terkelola] Pengoptimalan penskalaan terkelola data acak percikan -** Untuk Amazon EMR versi 5.34.0 dan yang lebih baru, dan EMR versi 6.4.0 dan yang lebih baru, penskalaan terkelola sekarang sadar data acak Spark (data yang didistribusikan ulang Spark di seluruh partisi untuk melakukan operasi tertentu). [Untuk informasi selengkapnya tentang operasi shuffle, lihat [Menggunakan penskalaan terkelola EMR di Amazon](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-scaling.html) EMR di Panduan Manajemen *EMR Amazon* dan Panduan Pemrograman Spark.](https://spark.apache.org/docs/latest/rdd-programming-guide.html#shuffle-operations)
+ Dimulai dengan Amazon EMR 5.32.0 dan 6.5.0, ukuran pelaksana dinamis untuk Apache Spark diaktifkan secara default. Untuk mengaktifkan atau menonaktifkan fitur ini, Anda dapat menggunakan parameter `spark.yarn.heterogeneousExecutors.enabled` konfigurasi.

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Amazon EMR mengurangi waktu startup cluster hingga 80 detik rata-rata untuk cluster yang menggunakan opsi AMI default EMR dan hanya menginstal aplikasi umum, seperti Apache Hadoop, Apache Spark dan Apache Hive.

**Masalah yang Diketahui**
+ Ketika Amazon EMR merilis 6.5.0, 6.6.0, atau 6.7.0 membaca tabel Apache Phoenix melalui shell Apache Spark, terjadi karena Amazon EMR menggunakan yang `NoSuchMethodError` salah. `Hbase.compat.version` Amazon EMR rilis 6.8.0 memperbaiki masalah ini.
+ Saat Anda menggunakan konektor DynamoDB dengan Spark di Amazon EMR versi 6.6.0, 6.7.0, dan 6.8.0, semua pembacaan dari tabel Anda mengembalikan hasil kosong, meskipun pemisahan input mereferensikan data yang tidak kosong. Ini karena Spark 3.2.0 disetel `spark.hadoopRDD.ignoreEmptySplits` ke `true` default. Sebagai solusinya, setel secara eksplisit ke. `spark.hadoopRDD.ignoreEmptySplits` `false` Amazon EMR rilis 6.9.0 memperbaiki masalah ini.
+ Pada klaster Trino yang sudah berjalan lama, Amazon EMR 6.6.0 memungkinkan parameter logging Pengumpulan Sampah di Trino jvm.config untuk mendapatkan wawasan yang lebih baik dari log Pengumpulan Sampah. Perubahan ini menambahkan banyak log Pengumpulan Sampah ke file launcher.log (/var/log/trino/launcher.log). Jika Anda menjalankan klaster Trino di Amazon EMR 6.6.0, Anda mungkin menemukan node kehabisan ruang disk setelah cluster berjalan selama beberapa hari karena log yang ditambahkan.

  Solusi untuk masalah ini adalah menjalankan skrip di bawah ini sebagai Tindakan Bootstrap untuk menonaktifkan parameter logging Pengumpulan Sampah di jvm.config saat membuat atau mengkloning cluster untuk Amazon EMR 6.6.0.

  ```
  #!/bin/bash
    set -ex
    PRESTO_PUPPET_DIR='/var/aws/emr/bigtop-deploy/puppet/modules/trino'
    sudo bash -c "sed -i '/-Xlog/d' ${PRESTO_PUPPET_DIR}/templates/jvm.config"
  ```
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`
+ Dengan Amazon EMR merilis 5.36.0 dan 6.6.0 hingga 6.9.0, `SecretAgent` dan komponen `RecordServer` layanan mungkin mengalami kehilangan data log karena konfigurasi pola nama file yang salah di properti Log4j2. Konfigurasi yang salah menyebabkan komponen menghasilkan hanya satu file log per hari. Ketika strategi rotasi terjadi, ia menimpa file yang ada alih-alih menghasilkan file log baru seperti yang diharapkan. Sebagai solusinya, gunakan tindakan bootstrap untuk menghasilkan file log setiap jam dan tambahkan bilangan bulat kenaikan otomatis dalam nama file untuk menangani rotasi.

  Untuk Amazon EMR 6.6.0 hingga 6.9.0 rilis, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster. 

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-6x/replace-puppet.sh,Args=[]"
  ```

  Untuk Amazon EMR 5.36.0, gunakan tindakan bootstrap berikut saat Anda meluncurkan cluster.

  ```
  ‑‑bootstrap‑actions "Path=s3://emr-data-access-control-us-east-1/customer-bootstrap-actions/log-rotation-emr-5x/replace-puppet.sh,Args=[]"
  ```

## 6.6.0 versi komponen
<a name="emr-660-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.5.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.20.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.50.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.14.2 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.14.2 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-6 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-6 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-6 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-6 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-6 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-6 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-6 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-6 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-6 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-6 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-6 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.4-amzn-2 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.4-amzn-2 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.4-amzn-2 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.4-amzn-2 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.4-amzn-2 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hbase-operator-tools | 2.4.4-amzn-2 | Alat perbaikan untuk HBase cluster Apache. | 
| hcatalog-client | 3.1.2-amzn-7 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-7 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-7 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-7 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-7 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-7 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-7 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.10.1-amzn-0 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.10.1-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.10.1-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.10.1-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.10.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.13.1 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.8.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 11.0.194 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-connectors | 5.1.2 | Konektor Apache Phoenix untuk Spark-3 | 
| phoenix-query-server | 5.1.2 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,267-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,267-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,267-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 367-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 367-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 367-amzn-0 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.2.0-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.2.0-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.2.0-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.2.0-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 22.02.0-amzn-0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.4.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.0 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.7 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.7 | ZooKeeper klien baris perintah. | 

## 6.6.0 klasifikasi konfigurasi
<a name="emr-660-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.6.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-iceberg | Ubah nilai dalam file iceberg.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.5.0
<a name="emr-650-release"></a>

## 6.5.0 versi aplikasi
<a name="emr-650-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://iceberg.apache.org/](https://iceberg.apache.org/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.5.0 | emr-6.4.0 | emr-6.3.1 | emr-6.3.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.31 | 1.12.31 | 1.11.977 | 1.11.977 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.14.0 | 1.13.1 | 1.12.1 | 1.12.1 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.4-amzn-1 | 2.4.4-amzn-0 | 2.2.6-amzn-1 | 2.2.6-amzn-1 | 
| HCatalog | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 3.1.2-amzn-4 | 
| Hadoop | 3.2.1-amzn-5 | 3.2.1-amzn-4 | 3.2.1-amzn-3.1 | 3.2.1-amzn-3 | 
| Hive | 3.1.2-amzn-6 | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 3.1.2-amzn-4 | 
| Hudi | 0.9.0-amzn-1 | 0.8.0-amzn-0 | 0.7.0-amzn-0 | 0.7.0-amzn-0 | 
| Hue | 4.9.0 | 4.9.0 | 4.9.0 | 4.9.0 | 
| Iceberg | 0.12.0 |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.4.1 | 1.2.2 | 1.2.2 | 
| Livy | 0.7.1-inkubasi | 0.7.1-inkubasi | 0.7.0-incubating | 0.7.0-incubating | 
| MXNet | 1.8.0 | 1.8.0 | 1.7.0 | 1.7.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.1 | 
| Phoenix | 5.1.2 | 5.1.2 | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0,261-amzn-0 | 0.254.1-amzn-0 | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 
| Spark | 3.1.2-amzn-1 | 3.1.2-amzn-0 | 3.1.1-amzn-0.1 | 3.1.1-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.4.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 360 | 359 | 350 | 350 | 
| Zeppelin | 0.10.0 | 0.9.0 | 0.9.0 | 0.9.0 | 
| ZooKeeper | 3.5.7 | 3.5.7 | 3.4.14 | 3.4.14 | 

## 6.5.0 catatan rilis
<a name="emr-650-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.5.0. Perubahan relatif terhadap 6.4.0.

Tanggal rilis awal: 20 Januari 2022

Tanggal rilis diperbarui: 21 Maret 2022

**Fitur Baru**
+ **[Penskalaan terkelola] Pengoptimalan penskalaan terkelola data acak percikan -** Untuk Amazon EMR versi 5.34.0 dan yang lebih baru, dan EMR versi 6.4.0 dan yang lebih baru, penskalaan terkelola sekarang sadar data acak Spark (data yang didistribusikan ulang Spark di seluruh partisi untuk melakukan operasi tertentu). [Untuk informasi selengkapnya tentang operasi shuffle, lihat [Menggunakan penskalaan terkelola EMR di Amazon](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-scaling.html) EMR di Panduan Manajemen *EMR Amazon* dan Panduan Pemrograman Spark.](https://spark.apache.org/docs/latest/rdd-programming-guide.html#shuffle-operations)
+ Dimulai dengan Amazon EMR 5.32.0 dan 6.5.0, ukuran pelaksana dinamis untuk Apache Spark diaktifkan secara default. Untuk mengaktifkan atau menonaktifkan fitur ini, Anda dapat menggunakan parameter `spark.yarn.heterogeneousExecutors.enabled` konfigurasi.
+ Support untuk format tabel terbuka Apache Iceberg untuk kumpulan data analitik yang sangat besar.
+ Support untuk ranger-trino-plugin 2.0.1-amzn-1
+ Support untuk toree 0.5.0

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Amazon EMR 6.5 versi rilis sekarang mendukung Apache Iceberg 0.12.0, dan menyediakan peningkatan runtime dengan Amazon EMR Runtime untuk Apache Spark, Amazon EMR Runtime untuk Presto, dan Amazon EMR Runtime untuk Apache Hive.
+ [Apache Iceberg](https://iceberg.apache.org/) adalah format tabel terbuka untuk kumpulan data besar di Amazon S3 dan memberikan kinerja kueri cepat pada tabel besar, komit atom, penulisan bersamaan, dan evolusi tabel yang kompatibel dengan SQL. Dengan EMR 6.5, Anda dapat menggunakan Apache Spark 3.1.2 dengan format tabel Iceberg.
+ Apache Hudi 0.9 menambahkan Spark SQL DDL dan dukungan DHTML. Hal ini memungkinkan Anda untuk membuat, meningkatkan tabel Hudi hanya menggunakan pernyataan SQL. Apache Hudi 0.9 juga mencakup sisi kueri dan peningkatan kinerja sisi penulis.
+ Amazon EMR Runtime untuk Apache Hive meningkatkan kinerja Apache Hive di Amazon S3 dengan menghapus operasi ganti nama selama operasi pementasan, dan meningkatkan kinerja untuk perintah metastore check (MSCK) yang digunakan untuk memperbaiki tabel.

**Masalah yang Diketahui**
+ Ketika Amazon EMR merilis 6.5.0, 6.6.0, atau 6.7.0 membaca tabel Apache Phoenix melalui shell Apache Spark, terjadi karena Amazon EMR menggunakan yang `NoSuchMethodError` salah. `Hbase.compat.version` Amazon EMR rilis 6.8.0 memperbaiki masalah ini.
+ Cluster bundel Hbase dalam ketersediaan tinggi (HA) gagal menyediakan ukuran volume default dan tipe instance. Solusi untuk masalah ini adalah dengan meningkatkan ukuran volume root.
+ Untuk menggunakan tindakan Spark dengan Apache Oozie, Anda harus menambahkan konfigurasi berikut ke file Oozie Anda. `workflow.xml` Jika tidak, beberapa perpustakaan penting seperti Hadoop dan EMRFS akan hilang dari classpath dari pelaksana Spark yang diluncurkan Oozie.

  ```
  <spark-opts>--conf spark.yarn.populateHadoopClasspath=true</spark-opts>
  ```
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`

## 6.5.0 versi komponen
<a name="emr-650-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.4.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.19.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.48.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.14.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.14.0 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-5 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-5 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-5 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-5 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-5 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-5 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-5 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-5 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-5 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-5 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-5 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.4-amzn-1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.4-amzn-1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.4-amzn-1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.4-amzn-1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.4-amzn-1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | 3.1.2-amzn-6 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-6 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-6 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-6 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-6 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-6 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-6 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.9.0-amzn-1 | Kerangka pemrosesan tambahan untuk memberi daya pada pipa data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.9.0-amzn-1 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.9.0-amzn-1 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.9.0-amzn-1 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.9.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| iceberg | 0.12.0 | Apache Iceberg adalah format tabel terbuka untuk kumpulan data analitik besar | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.8.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 10.1.243 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.1.2 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,261-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,261-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,261-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 360 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 360 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 360 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.1.2-amzn-1 | Klien baris perintah Spark. | 
| spark-history-server | 3.1.2-amzn-1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.1.2-amzn-1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.1.2-amzn-1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 0.4.1 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.4.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.10.0 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.7 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.7 | ZooKeeper klien baris perintah. | 

## 6.5.0 klasifikasi konfigurasi
<a name="emr-650-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.5.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| iceberg-defaults | Ubah nilai dalam file iceberg-defaults.conf Iceberg. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.4.0
<a name="emr-640-release"></a>

## 6.4.0 versi aplikasi
<a name="emr-640-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://trino.io/](https://trino.io/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.4.0 | emr-6.3.1 | emr-6.3.0 | emr-6.2.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.12.31 | 1.11.977 | 1.11.977 | 1.11.880 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.13.1 | 1.12.1 | 1.12.1 | 1.11.2 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.4.4-amzn-0 | 2.2.6-amzn-1 | 2.2.6-amzn-1 | 2.2.6-amzn-0 | 
| HCatalog | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | 
| Hadoop | 3.2.1-amzn-4 | 3.2.1-amzn-3.1 | 3.2.1-amzn-3 | 3.2.1-amzn-2.1 | 
| Hive | 3.1.2-amzn-5 | 3.1.2-amzn-4 | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | 
| Hudi | 0.8.0-amzn-0 | 0.7.0-amzn-0 | 0.7.0-amzn-0 | 0.6.0-amzn-1 | 
| Hue | 4.9.0 | 4.9.0 | 4.9.0 | 4.8.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.4.1 | 1.2.2 | 1.2.2 | 1.1.0 | 
| Livy | 0.7.1-inkubasi | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 
| MXNet | 1.8.0 | 1.7.0 | 1.7.0 | 1.7.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.1 | 5.2.0 | 
| Phoenix | 5.1.2 | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.254.1-amzn-0 | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 0.238.3-amzn-1 | 
| Spark | 3.1.2-amzn-0 | 3.1.1-amzn-0.1 | 3.1.1-amzn-0 | 3.0.1-amzn-0.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.4.1 | 2.4.1 | 2.4.1 | 2.3.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 359 | 350 | 350 | 343 | 
| Zeppelin | 0.9.0 | 0.9.0 | 0.9.0 | 0.9.0-preview1 | 
| ZooKeeper | 3.5.7 | 3.4.14 | 3.4.14 | 3.4.14 | 

## 6.4.0 catatan rilis
<a name="emr-640-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.4.0. Perubahan relatif terhadap 6.3.0.

Tanggal rilis awal: 20 September 2021

Tanggal rilis diperbarui: 21 Maret 2022

**Aplikasi-aplikasi yang didukung**
+ AWS SDK untuk Java versi 1.12.31
+ CloudWatch Wastafel versi 2.2.0
+ DynamoDB Connector versi 4.16.0
+ EMRFS versi 2.47.0
+ Amazon EMR Goodies versi 3.2.0
+ Amazon EMR Kinesis Connector versi 3.5.0
+ Server Rekam EMR Amazon versi 2.1.0
+ Amazon EMR Scripts versi 2.5.0
+ Flink versi 1.13.1
+ Ganglia versi 3.7.2
+ AWS Glue Hive Metastore Client versi 3.3.0
+ Hadoop versi 3.2.1-amzn-4
+ HBase versi 2.4.4-amzn-0
+ HBase-operator-tools 1.1.0
+ HCatalog versi 3.1.2-amzn-5
+ Sarang versi 3.1.2-amzn-5
+ Hudi versi 0.8.0-amzn-0
+ Hue versi 4.9.0
+ Java JDK versi Corretto-8.302.08.1 (build 1.8.0\$1302-b08)
+ JupyterHub versi 1.4.1
+ Livy versi 0.7.1-inkubasi
+ MXNet versi 1.8.0
+ Oozie versi 5.2.1
+ Phoenix versi 5.1.2
+ Pig versi 0.17.0
+ Presto versi 0.254.1-amzn-0
+ Trino versi 359
+ Apache Ranger KMS (enkripsi transparan multi-utama) versi 2.0.0
+ ranger-plugin 2.0.1-amzn-0
+ ranger-s3-plugin 1.2.0
+ SageMaker Spark SDK versi 1.4.1
+ Scala versi 2.12.10 (OpenJDK 64-Bit Server VM, Java 1.8.0\$1282)
+ Spark versi 3.1.2-amzn-0
+ spark-rapids 0.4.1
+ Sqoop versi 1.4.7
+ TensorFlow versi 2.4.1
+ tez versi 0.9.2
+ Zeppelin versi 0.9.0
+ Zookeeper versi 3.5.7
+ Konektor dan driver: DynamoDB Connector 4.16.0

**Fitur baru**
+ **[Penskalaan terkelola] Pengoptimalan penskalaan terkelola data acak percikan -** Untuk Amazon EMR versi 5.34.0 dan yang lebih baru, dan EMR versi 6.4.0 dan yang lebih baru, penskalaan terkelola sekarang sadar data acak Spark (data yang didistribusikan ulang Spark di seluruh partisi untuk melakukan operasi tertentu). [Untuk informasi selengkapnya tentang operasi shuffle, lihat [Menggunakan penskalaan terkelola EMR di Amazon](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-scaling.html) EMR di Panduan Manajemen *EMR Amazon* dan Panduan Pemrograman Spark.](https://spark.apache.org/docs/latest/rdd-programming-guide.html#shuffle-operations)
+ Pada kluster EMR Amazon yang mendukung Apache Ranger, Anda dapat menggunakan Apache Spark SQL untuk memasukkan data ke dalam atau memperbarui tabel metastore Apache Hive menggunakan,, dan. `INSERT INTO` `INSERT OVERWRITE` `ALTER TABLE` Saat menggunakan ALTER TABLE dengan Spark SQL, lokasi partisi harus menjadi direktori anak dari lokasi tabel. Amazon EMR saat ini tidak mendukung penyisipan data ke dalam partisi di mana lokasi partisi berbeda dari lokasi tabel.
+ [PrestosQL telah diubah namanya menjadi Trino.](https://trino.io/blog/2020/12/27/announcing-trino.html) 
+ Hive: Eksekusi kueri SELECT sederhana dengan klausa LIMIT dipercepat dengan menghentikan eksekusi kueri segera setelah jumlah catatan yang disebutkan dalam klausa LIMIT diambil. Kueri SELECT sederhana adalah kueri yang tidak memiliki GROUP BY/ORDER by klausa atau kueri yang tidak memiliki tahap peredam. Misalnya, `SELECT * from <TABLE> WHERE <Condition> LIMIT <Number>`. 

**Kontrol Konkurensi Hudi**
+ Hudi sekarang mendukung Optimistic Concurrency Control (OCC), yang dapat dimanfaatkan dengan operasi tulis seperti UPSERT dan INSERT untuk memungkinkan perubahan dari beberapa penulis ke tabel Hudi yang sama. Ini adalah OCC tingkat file, jadi dua komit (atau penulis) dapat menulis ke tabel yang sama, jika perubahannya tidak bertentangan. Untuk informasi lebih lanjut, lihat kontrol [konkurensi Hudi](https://hudi.apache.org/docs/concurrency_control/). 
+ Cluster EMR Amazon telah menginstal Zookeeper, yang dapat dimanfaatkan sebagai penyedia kunci untuk OCC. Untuk mempermudah penggunaan fitur ini, klaster EMR Amazon memiliki properti berikut yang telah dikonfigurasi sebelumnya:

  ```
  hoodie.write.lock.provider=org.apache.hudi.client.transaction.lock.ZookeeperBasedLockProvider
  hoodie.write.lock.zookeeper.url=<EMR Zookeeper URL>
  hoodie.write.lock.zookeeper.port=<EMR Zookeeper Port>
  hoodie.write.lock.zookeeper.base_path=/hudi
  ```

  Untuk mengaktifkan OCC, Anda perlu mengonfigurasi properti berikut baik dengan opsi pekerjaan Hudi atau di tingkat cluster menggunakan API konfigurasi EMR Amazon:

  ```
  hoodie.write.concurrency.mode=optimistic_concurrency_control
  hoodie.cleaner.policy.failed.writes=LAZY (Performs cleaning of failed writes lazily instead of inline with every write)
  hoodie.write.lock.zookeeper.lock_key=<Key to uniquely identify the Hudi table> (Table Name is a good option)
  ```

**Pemantauan Hudi: CloudWatch Integrasi Amazon untuk melaporkan Metrik Hudi**
+ Amazon EMR mendukung penerbitan Hudi Metrics ke Amazon. CloudWatch Ini diaktifkan dengan mengatur konfigurasi yang diperlukan berikut:

  ```
  hoodie.metrics.on=true
  hoodie.metrics.reporter.type=CLOUDWATCH
  ```
+ Berikut ini adalah konfigurasi Hudi opsional yang dapat Anda ubah:    
[\[See the AWS documentation website for more details\]](http://docs.aws.amazon.com/id_id/emr/latest/ReleaseGuide/emr-640-release.html)

**Dukungan dan peningkatan konfigurasi Amazon EMR Hudi**
+ Pelanggan sekarang dapat memanfaatkan API Konfigurasi EMR dan fitur Konfigurasi Ulang untuk mengonfigurasi konfigurasi Hudi di tingkat cluster. Dukungan konfigurasi berbasis file baru telah diperkenalkan melalui/etc/hudi/conf/hudi-defaults.conf di sepanjang baris aplikasi lain seperti Spark, Hive dll. EMR mengonfigurasi beberapa default untuk meningkatkan pengalaman pengguna:

  — `hoodie.datasource.hive_sync.jdbcurl ` dikonfigurasi ke URL server Hive cluster dan tidak perlu lagi ditentukan. Ini sangat berguna saat menjalankan pekerjaan dalam mode cluster Spark, di mana Anda sebelumnya harus menentukan IP master EMR Amazon. 

  — konfigurasi HBase khusus, yang berguna untuk menggunakan HBase indeks dengan Hudi.

  — Konfigurasi khusus penyedia kunci Zookeeper, seperti yang dibahas di bawah kontrol konkurensi, yang membuatnya lebih mudah untuk menggunakan Optimistic Concurrency Concurrency Control (OCC).
+ Perubahan tambahan telah diperkenalkan untuk mengurangi jumlah konfigurasi yang perlu Anda lewati, dan untuk menyimpulkan secara otomatis jika memungkinkan:

  — `partitionBy ` Kata kunci dapat digunakan untuk menentukan kolom partisi. 

  — Saat mengaktifkan Hive Sync, tidak lagi wajib untuk lulus. `HIVE_TABLE_OPT_KEY, HIVE_PARTITION_FIELDS_OPT_KEY, HIVE_PARTITION_EXTRACTOR_CLASS_OPT_KEY` Nilai-nilai tersebut dapat disimpulkan dari nama tabel Hudi dan bidang partisi. 

  — `KEYGENERATOR_CLASS_OPT_KEY` tidak wajib untuk lulus, dan dapat disimpulkan dari kasus yang lebih sederhana dari `SimpleKeyGenerator` dan`ComplexKeyGenerator`. 

**Peringatan Hudi**
+ Hudi tidak mendukung eksekusi vektor di Hive for Merge on Read (MoR) dan tabel Bootstrap. Misalnya, `count(*)` gagal dengan tabel realtime Hudi ketika `hive.vectorized.execution.enabled` disetel ke true. Sebagai solusinya, Anda dapat menonaktifkan pembacaan vektor dengan menyetel ke. `hive.vectorized.execution.enabled` `false` 
+ Dukungan multi-penulis tidak kompatibel dengan fitur bootstrap Hudi.
+ Flink Streamer dan Flink SQL adalah fitur eksperimental dalam rilis ini. Fitur-fitur ini tidak disarankan untuk digunakan dalam penyebaran produksi.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**

Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.
+ Sebelumnya, restart manual pengelola sumber daya pada cluster multi-master menyebabkan daemon on-cluster Amazon EMR, seperti Zookeeper, memuat ulang semua node yang sebelumnya dinonaktifkan atau hilang dalam file znode Zookeeper. Hal ini menyebabkan batas default terlampaui dalam situasi tertentu. Amazon EMR sekarang menghapus catatan node yang dinonaktifkan atau hilang yang lebih tua dari satu jam dari file Zookeeper dan batas internal telah ditingkatkan.
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ **Mengkonfigurasi cluster untuk memperbaiki masalah kinerja Apache YARN Timeline Server versi 1 dan 1.5**

  Apache YARN Timeline Server versi 1 dan 1.5 dapat menyebabkan masalah kinerja dengan cluster EMR yang sangat aktif dan besar, terutama dengan`yarn.resourcemanager.system-metrics-publisher.enabled=true`, yang merupakan pengaturan default di Amazon EMR. YARN Timeline Server v2 open source memecahkan masalah kinerja yang terkait dengan skalabilitas YARN Timeline Server.

  Solusi lain untuk masalah ini meliputi:
  + Mengkonfigurasi yarn.resourcemanager. system-metrics-publisher.enabled=false di yarn-site.xml.
  + Mengaktifkan perbaikan untuk masalah ini saat membuat cluster, seperti yang dijelaskan di bawah ini.

  Rilis EMR Amazon berikut berisi perbaikan untuk masalah kinerja Server Timeline YARN ini.

  EMR 5.30.2, 5.31.1, 5.32.1, 5.33.1, 5.34.x, 6.0.1, 6.1.1, 6.2.1, 6.3.1, 6.4.x

  [Untuk mengaktifkan perbaikan pada salah satu rilis EMR Amazon yang ditentukan di atas, setel properti ini ke `true` dalam file JSON konfigurasi yang diteruskan menggunakan parameter perintah:. `aws emr create-cluster`](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-create-cluster.html) `--configurations file://./configurations.json` Atau aktifkan perbaikan menggunakan [UI konsol konfigurasi ulang](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-configure-apps-running-cluster.html).

  Contoh isi file configurations.json:

  ```
  [
  {
  "Classification": "yarn-site",
  "Properties": {
  "yarn.resourcemanager.system-metrics-publisher.timeline-server-v1.enable-batch": "true",
  "yarn.resourcemanager.system-metrics-publisher.enabled": "true"
  },
  "Configurations": []
  }
  ]
  ```
+ WebHDFS dan server HTTPFS dinonaktifkan secara default. Anda dapat mengaktifkan kembali WebHDFS menggunakan konfigurasi Hadoop,. `dfs.webhdfs.enabled` Server HTTPFS dapat dimulai dengan menggunakan. `sudo systemctl start hadoop-httpfs`
+ HTTPS sekarang diaktifkan secara default untuk repositori Amazon Linux. Jika Anda menggunakan kebijakan Amazon S3 VPCE untuk membatasi akses ke bucket tertentu, Anda harus menambahkan ARN bucket Amazon Linux baru `arn:aws:s3:::amazonlinux-2-repos-$region/*` ke kebijakan Anda (ganti `$region` dengan wilayah tempat titik akhir berada). Untuk informasi lebih lanjut, lihat topik ini di forum AWS diskusi. [Pengumuman: Amazon Linux 2 sekarang mendukung kemampuan untuk menggunakan HTTPS saat menghubungkan ke repositori paket](https://forums.aws.amazon.com/ann.jspa?annID=8528). 
+ Hive: Kinerja kueri tulis ditingkatkan dengan mengaktifkan penggunaan direktori awal pada HDFS untuk pekerjaan terakhir. Data sementara untuk pekerjaan akhir ditulis ke HDFS alih-alih Amazon S3 dan kinerjanya ditingkatkan karena data dipindahkan dari HDFS ke lokasi tabel akhir (Amazon S3) alih-alih di antara perangkat Amazon S3.
+ Hive: Peningkatan waktu kompilasi kueri hingga 2.5x dengan Glue metastore Partition Pruning.
+ Secara default, ketika built-in UDFs diteruskan oleh Hive ke Server Metastore Hive, hanya sebagian dari built-in yang UDFs diteruskan ke Glue Metastore karena Glue hanya mendukung operator ekspresi terbatas. Jika Anda mengatur`hive.glue.partition.pruning.client=true`, maka semua pemangkasan partisi terjadi di sisi klien. Jika Anda mengatur`hive.glue.partition.pruning.server=true`, maka semua pemangkasan partisi terjadi di sisi server. 

**Masalah yang diketahui**
+ Kueri Hue tidak berfungsi di Amazon EMR 6.4.0 karena server Apache Hadoop HTTPFS dinonaktifkan secara default. [Untuk menggunakan Hue di Amazon EMR 6.4.0, mulai server HTTPFS secara manual di simpul utama Amazon EMR menggunakan`sudo systemctl start hadoop-httpfs`, atau gunakan langkah EMR Amazon.](https://docs.aws.amazon.com/emr/latest/ManagementGuide/add-step-cli.html)
+ Fitur Amazon EMR Notebooks yang digunakan dengan peniruan identitas pengguna Livy tidak berfungsi karena HTTPFS dinonaktifkan secara default. Dalam hal ini, notebook EMR tidak dapat terhubung ke cluster yang mengaktifkan peniruan Livy. Solusinya adalah memulai server HTTPFS sebelum menghubungkan notebook EMR ke cluster menggunakan. `sudo systemctl start hadoop-httpfs`
+ Di Amazon EMR versi 6.4.0, Phoenix tidak mendukung komponen konektor Phoenix.
+ Untuk menggunakan tindakan Spark dengan Apache Oozie, Anda harus menambahkan konfigurasi berikut ke file Oozie Anda. `workflow.xml` Jika tidak, beberapa perpustakaan penting seperti Hadoop dan EMRFS akan hilang dari classpath dari pelaksana Spark yang diluncurkan Oozie.

  ```
  <spark-opts>--conf spark.yarn.populateHadoopClasspath=true</spark-opts>
  ```
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`

## 6.4.0 versi komponen
<a name="emr-640-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.3.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.18.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.47.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.13.1 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.13.1 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-4 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-4 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-4 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-4 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-4 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-4 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-4 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-4 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-4 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-4 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-4 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.4.4-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.4.4-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.4.4-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.4.4-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.4.4-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | 3.1.2-amzn-5 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-5 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-5 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-5 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-5 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-5 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-5 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.8.0-amzn-0 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.8.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-trino | 0.8.0-amzn-0 | Perpustakaan bundel untuk menjalankan Trino dengan Hudi. | 
| hudi-spark | 0.8.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.9.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.4.1 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.1-inkubasi | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.8.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 10.1.243 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.1.2 | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.1.2 | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.254.1-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.254.1-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.254.1-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| trino-coordinator | 359 | Layanan untuk menerima kueri dan mengelola eksekusi kueri di antara trino-workers. | 
| trino-worker | 359 | Layanan untuk mengeksekusi potongan kueri. | 
| trino-client | 359 | Klien baris perintah Trino yang diinstal pada master siaga cluster HA di mana server Trino tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.1.2-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.1.2-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.1.2-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.1.2-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 0.4.1 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.4.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.5.7 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.5.7 | ZooKeeper klien baris perintah. | 

## 6.4.0 klasifikasi konfigurasi
<a name="emr-640-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.4.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| hudi-defaults | Ubah nilai dalam file hudi-defaults.conf Hudi. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| trino-log | Ubah nilai dalam file log.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-config | Ubah nilai dalam file config.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-password-authenticator | Ubah nilai dalam file password-authenticator.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-env | Ubah nilai dalam file trino-env.sh Trino. | Restarts Trino-Server (for Trino) | 
| trino-node | Ubah nilai dalam file node.properties Trino. | Not available. | 
| trino-connector-blackhole | Ubah nilai dalam file blackhole.properties Trino. | Not available. | 
| trino-connector-cassandra | Ubah nilai dalam file cassandra.properties Trino. | Not available. | 
| trino-connector-hive | Ubah nilai dalam file hive.properties Trino. | Restarts Trino-Server (for Trino) | 
| trino-connector-jmx | Ubah nilai dalam file jmx.properties Trino. | Not available. | 
| trino-connector-kafka | Ubah nilai dalam file kafka.properties Trino. | Not available. | 
| trino-connector-localfile | Ubah nilai dalam file localfile.properties Trino. | Not available. | 
| trino-connector-memory | Ubah nilai dalam file memory.properties Trino. | Not available. | 
| trino-connector-mongodb | Ubah nilai dalam file mongodb.properties Trino. | Not available. | 
| trino-connector-mysql | Ubah nilai dalam file mysql.properties Trino. | Not available. | 
| trino-connector-postgresql | Ubah nilai dalam file postgresql.properties Trino. | Not available. | 
| trino-connector-raptor | Ubah nilai dalam file raptor.properties Trino. | Not available. | 
| trino-connector-redis | Ubah nilai dalam file redis.properties Trino. | Not available. | 
| trino-connector-redshift | Ubah nilai dalam file redshift.properties Trino. | Not available. | 
| trino-connector-tpch | Ubah nilai dalam file tpch.properties Trino. | Not available. | 
| trino-connector-tpcds | Ubah nilai dalam file tpcds.properties Trino. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.3.1
<a name="emr-631-release"></a>

## 6.3.1 versi aplikasi
<a name="emr-631-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://prestosql.io/](https://prestosql.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.3.1 | emr-6.3.0 | emr-6.2.1 | emr-6.2.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.977 | 1.11.977 | 1.11.880 | 1.11.880 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.12.1 | 1.12.1 | 1.11.2 | 1.11.2 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.6-amzn-1 | 2.2.6-amzn-1 | 2.2.6-amzn-0 | 2.2.6-amzn-0 | 
| HCatalog | 3.1.2-amzn-4 | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | 
| Hadoop | 3.2.1-amzn-3.1 | 3.2.1-amzn-3 | 3.2.1-amzn-2.1 | 3.2.1-amzn-2 | 
| Hive | 3.1.2-amzn-4 | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | 
| Hudi | 0.7.0-amzn-0 | 0.7.0-amzn-0 | 0.6.0-amzn-1 | 0.6.0-amzn-1 | 
| Hue | 4.9.0 | 4.9.0 | 4.8.0 | 4.8.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 | 2.1.0 | 
| JupyterHub | 1.2.2 | 1.2.2 | 1.1.0 | 1.1.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 
| MXNet | 1.7.0 | 1.7.0 | 1.7.0 | 1.7.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.1 | 5.2.0 | 5.2.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.245.1-amzn-0 | 0.245.1-amzn-0 | 0.238.3-amzn-1 | 0.238.3-amzn-1 | 
| Spark | 3.1.1-amzn-0.1 | 3.1.1-amzn-0 | 3.0.1-amzn-0.1 | 3.0.1-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.4.1 | 2.4.1 | 2.3.1 | 2.3.1 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 350 | 350 | 343 | 343 | 
| Zeppelin | 0.9.0 | 0.9.0 | 0.9.0-preview1 | 0.9.0-preview1 | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## 6.3.1 Catatan terbitan
<a name="emr-631-relnotes"></a>

Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ HTTPS sekarang diaktifkan secara default untuk repositori Amazon Linux. Jika Anda menggunakan kebijakan Amazon S3 VPCE untuk membatasi akses ke bucket tertentu, Anda harus menambahkan ARN bucket Amazon Linux baru `arn:aws:s3:::amazonlinux-2-repos-$region/*` ke kebijakan Anda (ganti `$region` dengan wilayah tempat titik akhir berada). Untuk informasi lebih lanjut, lihat topik ini di forum AWS diskusi. [Pengumuman: Amazon Linux 2 sekarang mendukung kemampuan untuk menggunakan HTTPS saat menghubungkan ke repositori paket](https://forums.aws.amazon.com/ann.jspa?annID=8528). 

**Masalah yang diketahui**
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`

## 6.3.1 versi komponen
<a name="emr-631-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.2.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.18.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.46.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.12.1 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.12.1 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-3.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-3.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-3.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-3.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-3.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-3.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-3.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-3.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-3.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-3.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-3.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.6-amzn-1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.6-amzn-1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.6-amzn-1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.6-amzn-1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.6-amzn-1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | 3.1.2-amzn-4 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-4 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-4 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-4 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-4 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-4 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-4 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.7.0-amzn-0 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.7.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-prestosql | 0.7.0-amzn-0 | Perpustakaan paket untuk menjalankan PrestoSQL dengan Hudi. | 
| hudi-spark | 0.7.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.9.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.2.2 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.7.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 10.1.243 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.245.1-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.245.1-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.245.1-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| prestosql-coordinator | 350 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara prestosql-woorker. | 
| prestosql-worker | 350 | Layanan untuk mengeksekusi potongan kueri. | 
| prestosql-client | 350 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.1.1-amzn-0.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.1.1-amzn-0.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.1.1-amzn-0.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.1.1-amzn-0.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 0.4.1 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.4.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## 6.3.1 klasifikasi konfigurasi
<a name="emr-631-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.3.1**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| prestosql-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-node | Ubah nilai dalam file node.properties PrestoSQL. | Not available. | 
| prestosql-connector-blackhole | Ubah nilai dalam file blackhole.properties PrestoSQL. | Not available. | 
| prestosql-connector-cassandra | Ubah nilai dalam file cassandra.properties PrestoSQL. | Not available. | 
| prestosql-connector-hive | Ubah nilai dalam file hive.properties PrestoSQL. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-connector-jmx | Ubah nilai dalam file jmx.properties PrestoSQL. | Not available. | 
| prestosql-connector-kafka | Ubah nilai dalam file kafka.properties PrestoSQL. | Not available. | 
| prestosql-connector-localfile | Ubah nilai dalam file localfile.properties PrestoSQL. | Not available. | 
| prestosql-connector-memory | Ubah nilai dalam file memory.properties PrestoSQL. | Not available. | 
| prestosql-connector-mongodb | Ubah nilai dalam file mongodb.properties PrestoSQL. | Not available. | 
| prestosql-connector-mysql | Ubah nilai dalam file mysql.properties PrestoSQL. | Not available. | 
| prestosql-connector-postgresql | Ubah nilai dalam file postgresql.properties PrestoSQL. | Not available. | 
| prestosql-connector-raptor | Ubah nilai dalam file raptor.properties PrestoSQL. | Not available. | 
| prestosql-connector-redis | Ubah nilai dalam file redis.properties PrestoSQL. | Not available. | 
| prestosql-connector-redshift | Ubah nilai dalam file redshift.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpch | Ubah nilai dalam file tpch.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpcds | Ubah nilai dalam file tpcds.properties PrestoSQL. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR Rilis 6.3.0
<a name="emr-630-release"></a>

## versi aplikasi 6.3.0
<a name="emr-630-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://prestosql.io/](https://prestosql.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.3.0 | emr-6.2.1 | emr-6.2.0 | emr-6.1.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.977 | 1.11.880 | 1.11.880 | 1.11.828 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.12.1 | 1.11.2 | 1.11.2 | 1.11.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.6-amzn-1 | 2.2.6-amzn-0 | 2.2.6-amzn-0 | 2.2.5 | 
| HCatalog | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | 
| Hadoop | 3.2.1-amzn-3 | 3.2.1-amzn-2.1 | 3.2.1-amzn-2 | 3.2.1-amzn-1.1 | 
| Hive | 3.1.2-amzn-4 | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | 
| Hudi | 0.7.0-amzn-0 | 0.6.0-amzn-1 | 0.6.0-amzn-1 | 0.5.2-incubating-amzn-2 | 
| Hue | 4.9.0 | 4.8.0 | 4.8.0 | 4.7.1 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 | 2.1.0 |  -  | 
| JupyterHub | 1.2.2 | 1.1.0 | 1.1.0 | 1.1.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 
| MXNet | 1.7.0 | 1.7.0 | 1.7.0 | 1.6.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.1 | 5.2.0 | 5.2.0 | 5.2.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.245.1-amzn-0 | 0.238.3-amzn-1 | 0.238.3-amzn-1 | 0,232 | 
| Spark | 3.1.1-amzn-0 | 3.0.1-amzn-0.1 | 3.0.1-amzn-0 | 3.0.0-amzn-0.1 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.4.1 | 2.3.1 | 2.3.1 | 2.1.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 350 | 343 | 343 | 338 | 
| Zeppelin | 0.9.0 | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-preview1 | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## catatan rilis 6.3.0
<a name="emr-630-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.3.0. Perubahan bersifat relatif terhadap 6.2.0.

Tanggal rilis awal: 12 Mei 2021

Terakhir dimutakhirkan tanggal: Agustus 9, 2021

**Aplikasi-aplikasi yang didukung**
+ AWS SDK untuk Java versi 1.11.977
+ CloudWatch Wastafel versi 2.1.0
+ DynamoDB Connector versi 4.16.0
+ EMRFS versi 2.46.0
+ Amazon EMR Goodies versi 3.2.0
+ Amazon EMR Kinesis Connector versi 3.5.0
+ Amazon EMR Record Server versi 2.0.0
+ Amazon EMR Scripts versi 2.5.0
+ Flink versi 1.12.1
+ Ganglia versi 3.7.2
+ AWS Glue Hive Metastore Client versi 3.2.0
+ Hadoop versi 3.2.1-amzn-3
+ HBase versi 2.2.6-amzn-1
+ HBase-operator-tools 1.0.0
+ HCatalog versi 3.1.2-amzn-0
+ Hive 3.1.2-amzn-4
+ Hudi versi 0.7.0-amzn-0
+ Hue versi 4.9.0
+ Java JDK versi Corretto-8.282.08.1 (build 1.8.0\$1282-b08)
+ JupyterHub versi 1.2.0
+ Livy versi 0.7.0-incubating
+ MXNet versi 1.7.0
+ Oozie versi 5.2.1
+ Phoenix versi 5.0.0
+ Pig versi 0.17.0
+ Presto versi 0.245.1-amzn-0
+ PrestoSQL versi 350
+ Apache Ranger KMS (enkripsi transparan multi-utama) versi 2.0.0
+ ranger-plugin 2.0.1-amzn-0
+ ranger-s3-plugin 1.1.0
+ SageMaker Spark SDK versi 1.4.1
+ Scala versi 2.12.10 (OpenJDK 64-Bit Server VM, Java 1.8.0\$1282)
+ Spark 3.1.1-amzn-0
+ spark-rapids 0.4.1
+ Sqoop versi 1.4.7
+ TensorFlow versi 2.4.1
+ tez versi 0.9.2
+ Zeppelin versi 0.9.0
+ Zookeeper versi 3.4.14
+ Konektor dan driver: DynamoDB Connector 4.16.0

**Fitur baru**
+ Amazon EMR mendukung Poin Akses Amazon S3, fitur Amazon S3 yang memungkinkan Anda mengelola akses untuk danau data bersama dengan mudah. Dengan menggunakan alias Titik Akses Amazon S3, Anda dapat menyederhanakan akses data dalam skala besar di Amazon EMR. Anda dapat menggunakan Titik Akses Amazon S3 dengan semua versi Amazon EMR tanpa biaya tambahan di semua wilayah di mana AWS Amazon EMR tersedia. *Untuk mempelajari selengkapnya tentang Alias Titik Akses Amazon S3 dan Titik Akses, lihat [Menggunakan alias gaya ember untuk titik akses Anda di Panduan Pengguna](https://docs.aws.amazon.com/AmazonS3/latest/userguide/access-points-alias.html) Amazon S3.*
+ Parameter baru `DescribeReleaseLabel` dan `ListReleaseLabel` API memberikan detail label rilis Amazon EMR. Anda dapat membuat daftar rilis yang tersedia secara terprogram di wilayah tempat permintaan API dijalankan, dan mencantumkan aplikasi yang tersedia untuk label rilis EMR Amazon tertentu. Parameter label rilis juga mencantumkan rilis EMR Amazon yang mendukung aplikasi tertentu, seperti Spark. Informasi ini dapat digunakan untuk meluncurkan kluster EMR Amazon secara terprogram. Misalnya, Anda dapat meluncurkan cluster menggunakan versi rilis terbaru dari `ListReleaseLabel` hasil. Untuk informasi selengkapnya, lihat [DescribeReleaseLabel](https://docs.aws.amazon.com/emr/latest/APIReference/API_DescribeReleaseLabel.html)dan [ListReleaseLabels](https://docs.aws.amazon.com/emr/latest/APIReference/API_ListReleaseLabels.html)di Referensi *API EMR Amazon*.
+ Dengan Amazon EMR 6.3.0, Anda dapat meluncurkan sebuah klaster yang asli terintegrasi dengan Apache Ranger. Apache Ranger adalah kerangka kerja sumber terbuka untuk mengaktifkan, memantau, dan mengelola keamanan data komprehensif di seluruh platform Hadoop. Untuk informasi selengkapnya, lihat [Apache Ranger](https://ranger.apache.org/). Dengan integrasi asli, Anda dapat membawa Apache Ranger Anda sendiri untuk memberlakukan kendali akses data halus di Amazon EMR. Lihat [Mengintegrasikan Amazon EMR dengan Apache Ranger](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-ranger.html) dalam Panduan Pengelolaan Amazon EMR.
+ Kebijakan terkelola cakupan: Untuk menyelaraskan dengan praktik AWS terbaik, Amazon EMR telah memperkenalkan kebijakan terkelola default cakupan EMR v2 sebagai pengganti kebijakan yang tidak digunakan lagi. Lihat [Kebijakan Terkelola Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-iam-policies.html).
+ Status dukungan Instance Metadata Service (IMDS) V2: Untuk Amazon EMR 6.2 atau yang lebih baru, komponen EMR Amazon digunakan untuk semua panggilan IMDS. IMDSv2 Untuk panggilan IMDS dalam kode aplikasi Anda, Anda dapat menggunakan keduanya IMDSv1 dan IMDSv2, atau mengkonfigurasi IMDS untuk digunakan hanya IMDSv2 untuk keamanan tambahan. Jika Anda menonaktifkan IMDSv1 di rilis Amazon EMR 6.x sebelumnya, ini menyebabkan kegagalan startup cluster.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ Spark SQL UI menjelaskan mode default diubah dari `extended` ke `formatted` di [Spark](https://issues.apache.org/jira/browse/SPARK-31325) 3.1. Amazon EMR mengembalikannya `extended` untuk memasukkan informasi rencana logis di Spark SQL UI. Ini dapat dikembalikan dengan pengaturan `spark.sql.ui.explainMode` ke`formatted`.
+ Komit berikut di-backport dari cabang master Spark.

  - [[SPARK-34752] [BUILD]](https://issues.apache.org/jira/browse/SPARK-34752) Bump Jetty ke 9.4.37 untuk alamat CVE-2020-27223.

  - [[SPARK-34534]](https://issues.apache.org/jira/browse/SPARK-34534) Perbaiki pesanan BlocKids saat digunakan untuk mengambil blok. FetchShuffleBlocks 

  - [[SPARK-34681] [SQL]](https://issues.apache.org/jira/browse/SPARK-34681) Perbaiki bug untuk gabungan hash acak luar penuh saat membangun sisi kiri dengan kondisi yang tidak sama.

  - [[SPARK-34497] [SQL]](https://issues.apache.org/jira/browse/SPARK-34497) Perbaiki penyedia koneksi JDBC bawaan untuk memulihkan perubahan konteks keamanan JVM.
+ [https://github.com/NVIDIA/spark-rapids/issues/1378](https://github.com/NVIDIA/spark-rapids/issues/1378) Untuk detail konfigurasi baru`spark.sql.optimizer.dynamicPartitionPruning.enforceBroadcastReuse`, lihat [RAPIDS issue \$1 \$11386](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-performance.html#emr-spark-performance-dynamic).
+ File algoritme default output committer telah berubah dari algoritme v2 untuk algoritme v1 di Spark 3.1 sumber terbuka. Untuk informasi lebih lanjut, lihat [EMR Amazon ini mengoptimalkan kinerja Spark -](https://issues.apache.org/jira/browse/SPARK-33019) pemangkasan partisi dinamis.
+ Amazon EMR mengembalikan ke algoritme v2, default yang digunakan di Amazon EMR rilis 6.x sebelumnya, untuk mencegah penurunan performa. Untuk memulihkan perilaku sumber terbuka Spark 3.1, atur `spark.hadoop.mapreduce.fileoutputcommitter.algorithm.version` ke `1`. Spark sumber terbuka membuat perubahan ini karena melakukan tugas dalam file algoritme output committer v2 tidak bersifat atom, yang dapat menyebabkan masalah kebenaran data output dalam beberapa kasus. Namun, melakukan tugas dalam algoritme v1 juga tidak bersifat atom. Dalam beberapa skenario melakukan tugas termasuk penghapusan yang dilakukan sebelum mengubah nama. Hal ini dapat mengakibatkan terjadinya masalah kebenaran data diam.
+ Memperbaiki masalah Penskalaan Terkelola dalam rilis EMR Amazon sebelumnya dan melakukan peningkatan sehingga tingkat kegagalan aplikasi berkurang secara signifikan.
+ Menginstal AWS Java SDK Bundle pada setiap cluster baru. Ini adalah toples tunggal yang berisi semua layanan SDKs dan dependensinya, bukan stoples komponen individual. Untuk informasi selengkapnya, lihat [Java SDK Bundled](https://aws.amazon.com/blogs/developer/java-sdk-bundle/) Dependency.

**Masalah yang diketahui**
+ Untuk Amazon EMR 6.3.0 dan 6.2.0 kluster subnet pribadi, Anda tidak dapat mengakses UI web Ganglia. Anda akan mendapatkan pesan kesalahan "akses ditolak (403)". Web lain UIs, seperti Spark, Hue,, Zeppelin JupyterHub, Livy, dan Tez bekerja secara normal. Akses UI web Ganglia pada klaster subnet publik juga bekerja secara normal. Untuk mengatasi masalah ini, mulai ulang layanan httpd pada node utama dengan`sudo systemctl restart httpd`. Masalah ini telah diperbaiki di Amazon EMR 6.4.0.
+ Saat AWS Glue Data Catalog diaktifkan, menggunakan Spark untuk mengakses AWS Glue DB dengan URI lokasi string nol mungkin gagal. Ini terjadi pada rilis EMR Amazon sebelumnya, tetapi SPARK-31709 (https://issues.apache. org/jira/browse/SPARK-31709) membuatnya berlaku untuk lebih banyak kasus. Misalnya, saat membuat tabel dalam AWS Glue DB default yang URI lokasinya adalah string null, `spark.sql("CREATE TABLE mytest (key string) location '/table_path';")` gagal dengan pesan, “Tidak dapat membuat Path dari string kosong.” Untuk mengatasinya, atur URI lokasi database AWS Glue Anda secara manual, lalu buat tabel dalam database ini menggunakan Spark.
+ Di Amazon EMR 6.3.0, PrestoSQL telah naik dari versi 343 ke versi 350. Ada dua keamanan terkait perubahan dari sumber terbuka yang berhubungan dengan perubahan versi ini. Kendali akses katalog berbasis file diubah dari `deny` ke `allow` ketika tabel, skema, atau aturan properti sesi tidak ditentukan. Juga, kendali akses sistem berbasis file diubah untuk mendukung file tanpa katalog aturan yang ditentukan. Dalam hal ini, semua akses ke katalog diizinkan.

  Untuk informasi selengkapnya, lihat [Rilis 344 (9 Oktober 2020)](https://trino.io/docs/current/release/release-344.html#security).
+ Perhatikan bahwa direktori pengguna Hadoop (/home/hadoop) is readable by everyone. It has Unix 755 (drwxr-xr-x) directory permissions to allow read access by frameworks like Hive. You can put files in /home/hadoopdan subdirektorinya, tetapi perhatikan izin pada direktori tersebut untuk melindungi informasi sensitif.
+ **Turunkan batas “Maks open files” pada yang lebih lama AL2 [diperbaiki dalam rilis yang lebih baru].** Rilis Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0, dan emr-6.2.0 didasarkan pada versi lama dari Amazon Linux 2 (), yang memiliki pengaturan ulimit yang lebih rendah untuk “File terbuka maksimum” ketika kluster Amazon EMR dibuat dengan AMI default. AL2 Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi. Rilis dengan batas file terbuka yang lebih rendah menyebabkan kesalahan “Terlalu banyak file terbuka” saat mengirimkan pekerjaan Spark. Dalam rilis yang terkena dampak, AMI default Amazon EMR memiliki pengaturan ulimit default 4096 untuk “File terbuka maksimum,” yang lebih rendah dari batas file 65536 di AMI Amazon Linux 2 terbaruAmazon. Pengaturan ulimit yang lebih rendah untuk "Maksimal file terbuka" menyebabkan kegagalan tugas Spark ketika driver dan pelaksana mencoba untuk membuka lebih dari 4096 file. Untuk memperbaiki masalah, Amazon EMR memiliki skrip tindakan bootstrap (BA) yang menyesuaikan pengaturan ulimit saat pembuatan klaster. 

  Jika Anda menggunakan versi EMR Amazon yang lebih lama yang tidak memiliki perbaikan permanen untuk masalah ini, solusi berikut memungkinkan Anda untuk secara eksplisit mengatur ulimit pengontrol instans ke maksimum 65536 file.

**Mengatur secara eksplisit ulimit dari baris perintah**

  1. Edit `/etc/systemd/system/instance-controller.service` untuk menambahkan parameter berikut ke bagian Layanan.

     `LimitNOFILE=65536`

     `LimitNPROC=65536`

  1. Mulai ulang InstanceController

     `$ sudo systemctl daemon-reload`

     `$ sudo systemctl restart instance-controller`

  **Tetapkan ulimit menggunakan tindakan bootstrap (BA)**

  Anda juga dapat menggunakan skrip tindakan bootstrap (BA) untuk mengkonfigurasi ulimit instans-pengendali menjadi 65536 file saat pembuatan klaster.

  ```
  #!/bin/bash
  for user in hadoop spark hive; do
  sudo tee /etc/security/limits.d/$user.conf << EOF
  $user - nofile 65536
  $user - nproc 65536
  EOF
  done
  for proc in instancecontroller logpusher; do
  sudo mkdir -p /etc/systemd/system/$proc.service.d/
  sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF
  [Service]
  LimitNOFILE=65536
  LimitNPROC=65536
  EOF
  pid=$(pgrep -f aws157.$proc.Main)
  sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535
  done
  sudo systemctl daemon-reload
  ```
+ 
**penting**  
Cluster EMR yang menjalankan Amazon Linux atau Amazon Linux 2 Amazon Machine Images (AMI) menggunakan perilaku default Amazon Linux, dan tidak secara otomatis mengunduh dan menginstal pembaruan kernel penting dan kritis yang memerlukan reboot. Ini adalah perilaku yang sama dengan instans Amazon EC2 lainnya yang menjalankan AMI Amazon Linux default. Jika pembaruan perangkat lunak Amazon Linux baru yang memerlukan reboot (seperti pembaruan kernel, NVIDIA, dan CUDA) tersedia setelah rilis EMR Amazon tersedia, instance cluster EMR yang menjalankan AMI default tidak secara otomatis mengunduh dan menginstal pembaruan tersebut. Untuk mendapatkan pembaruan kernel, Anda dapat [menyesuaikan Amazon EMR AMI](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-custom-ami.html) menjadi [gunakan Amazon Linux AMI terbaru](https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/finding-an-ami.html).
+ Untuk menggunakan tindakan Spark dengan Apache Oozie, Anda harus menambahkan konfigurasi berikut ke file Oozie Anda. `workflow.xml` Jika tidak, beberapa perpustakaan penting seperti Hadoop dan EMRFS akan hilang dari classpath dari pelaksana Spark yang diluncurkan Oozie.

  ```
  <spark-opts>--conf spark.yarn.populateHadoopClasspath=true</spark-opts>
  ```
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`

## versi komponen 6.3.0
<a name="emr-630-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.2.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.2.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.18.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.1.0 | EMR S3Select Connector | 
| emrfs | 2.46.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.12.1 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.12.1 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-3 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-3 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-3 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-3 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-3 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-3 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-3 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-3 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-3 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-3 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-3 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.6-amzn-1 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.6-amzn-1 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.6-amzn-1 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.6-amzn-1 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.6-amzn-1 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | 3.1.2-amzn-4 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-4 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-4 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-4 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-4 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-4 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-4 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.7.0-amzn-0 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.7.0-amzn-0 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-prestosql | 0.7.0-amzn-0 | Perpustakaan paket untuk menjalankan PrestoSQL dengan Hudi. | 
| hudi-spark | 0.7.0-amzn-0 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.9.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.2.2 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.7.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.68\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 10.1.243 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.1 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.1 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.5.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.245.1-amzn-0 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.245.1-amzn-0 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.245.1-amzn-0 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| prestosql-coordinator | 350 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara prestosql-woorker. | 
| prestosql-worker | 350 | Layanan untuk mengeksekusi potongan kueri. | 
| prestosql-client | 350 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 4.0.2 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.1.1-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.1.1-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.1.1-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.1.1-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 0.4.1 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.4.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## klasifikasi konfigurasi 6.3.0
<a name="emr-630-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.3.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Restarts Flink history server. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Restarts Flink history server. | 
| flink-log4j-session | Ubah pengaturan Flink log4j-session.properties untuk sesi. Kubernetes/Yarn  | Restarts Flink history server. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Restarts Flink history server. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS services Namenode, Datanode, and ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| prestosql-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-node | Ubah nilai dalam file node.properties PrestoSQL. | Not available. | 
| prestosql-connector-blackhole | Ubah nilai dalam file blackhole.properties PrestoSQL. | Not available. | 
| prestosql-connector-cassandra | Ubah nilai dalam file cassandra.properties PrestoSQL. | Not available. | 
| prestosql-connector-hive | Ubah nilai dalam file hive.properties PrestoSQL. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-connector-jmx | Ubah nilai dalam file jmx.properties PrestoSQL. | Not available. | 
| prestosql-connector-kafka | Ubah nilai dalam file kafka.properties PrestoSQL. | Not available. | 
| prestosql-connector-localfile | Ubah nilai dalam file localfile.properties PrestoSQL. | Not available. | 
| prestosql-connector-memory | Ubah nilai dalam file memory.properties PrestoSQL. | Not available. | 
| prestosql-connector-mongodb | Ubah nilai dalam file mongodb.properties PrestoSQL. | Not available. | 
| prestosql-connector-mysql | Ubah nilai dalam file mysql.properties PrestoSQL. | Not available. | 
| prestosql-connector-postgresql | Ubah nilai dalam file postgresql.properties PrestoSQL. | Not available. | 
| prestosql-connector-raptor | Ubah nilai dalam file raptor.properties PrestoSQL. | Not available. | 
| prestosql-connector-redis | Ubah nilai dalam file redis.properties PrestoSQL. | Not available. | 
| prestosql-connector-redshift | Ubah nilai dalam file redshift.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpch | Ubah nilai dalam file tpch.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpcds | Ubah nilai dalam file tpcds.properties PrestoSQL. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie and HiveServer2. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zeppelin-site | Ubah pengaturan konfigurasi di zeppelin-site.xml. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.2.1
<a name="emr-621-release"></a>

## 6.2.1 versi aplikasi
<a name="emr-621-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://prestosql.io/](https://prestosql.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.2.1 | emr-6.2.0 | emr-6.1.1 | emr-6.1.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.880 | 1.11.880 | 1.11.828 | 1.11.828 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.11.2 | 1.11.2 | 1.11.0 | 1.11.0 | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.6-amzn-0 | 2.2.6-amzn-0 | 2.2.5 | 2.2.5 | 
| HCatalog | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 
| Hadoop | 3.2.1-amzn-2.1 | 3.2.1-amzn-2 | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 
| Hive | Versi 3.1.2 amzn-3 | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 
| Hudi | 0.6.0-amzn-1 | 0.6.0-amzn-1 | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 
| Hue | 4.8.0 | 4.8.0 | 4.7.1 | 4.7.1 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 | 2.1.0 |  -  |  -  | 
| JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.1.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 
| MXNet | 1.7.0 | 1.7.0 | 1.6.0 | 1.6.0 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.2.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 | 0.17.0 | 
| Presto | 0.238.3-amzn-1 | 0.238.3-amzn-1 | 0,232 | 0,232 | 
| Spark | 3.0.1-amzn-0.1 | 3.0.1-amzn-0 | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 | 1.4.7 | 
| TensorFlow | 2.3.1 | 2.3.1 | 2.1.0 | 2.1.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 343 | 343 | 338 | 338 | 
| Zeppelin | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-preview1 | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## 6.2.1 catatan rilis
<a name="emr-621-relnotes"></a>

Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ HTTPS sekarang diaktifkan secara default untuk repositori Amazon Linux. Jika Anda menggunakan kebijakan Amazon S3 VPCE untuk membatasi akses ke bucket tertentu, Anda harus menambahkan ARN bucket Amazon Linux baru `arn:aws:s3:::amazonlinux-2-repos-$region/*` ke kebijakan Anda (ganti `$region` dengan wilayah tempat titik akhir berada). Untuk informasi lebih lanjut, lihat topik ini di forum AWS diskusi. [Pengumuman: Amazon Linux 2 sekarang mendukung kemampuan untuk menggunakan HTTPS saat menghubungkan ke repositori paket](https://forums.aws.amazon.com/ann.jspa?annID=8528). 

**Masalah yang diketahui**
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`

## 6.2.1 versi komponen
<a name="emr-621-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.1.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.0.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.16.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.0.0 | EMR S3Select Connector | 
| emrfs | 2.44.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.11.2 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.11.2 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-2.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-2.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-2.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-2.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-2.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-2.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-2.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-2.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-2.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-2.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-2.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.6-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.6-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.6-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.6-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.6-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | Versi 3.1.2 amzn-3 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | Versi 3.1.2 amzn-3 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | Versi 3.1.2 amzn-3 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | Versi 3.1.2 amzn-3 | Klien baris perintah Hive. | 
| hive-hbase | Versi 3.1.2 amzn-3 | Klien Hive-hbase. | 
| hive-metastore-server | Versi 3.1.2 amzn-3 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | Versi 3.1.2 amzn-3 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.6.0-amzn-1 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.6.0-amzn-1 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-prestosql | 0.6.0-amzn-1 | Perpustakaan paket untuk menjalankan PrestoSQL dengan Hudi. | 
| hudi-spark | 0.6.0-amzn-1 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.8.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.1.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.7.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.64\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 10.1.243 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.0 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.0 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.4.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.238.3-amzn-1 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.238.3-amzn-1 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.238.3-amzn-1 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| prestosql-coordinator | 343 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara prestosql-woorker. | 
| prestosql-worker | 343 | Layanan untuk mengeksekusi potongan kueri. | 
| prestosql-client | 343 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 3.4.3 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.0.1-amzn-0.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.0.1-amzn-0.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.0.1-amzn-0.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.0.1-amzn-0.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 0.2.0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.3.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0-preview1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## 6.2.1 klasifikasi konfigurasi
<a name="emr-621-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**klasifikasi emr-6.2.1**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Not available. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Not available. | 
| flink-log4j-yarn-session | Ubah pengaturan Flink log4 j-yarn-session .properties. | Not available. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Not available. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| prestosql-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-node | Ubah nilai dalam file node.properties PrestoSQL. | Not available. | 
| prestosql-connector-blackhole | Ubah nilai dalam file blackhole.properties PrestoSQL. | Not available. | 
| prestosql-connector-cassandra | Ubah nilai dalam file cassandra.properties PrestoSQL. | Not available. | 
| prestosql-connector-hive | Ubah nilai dalam file hive.properties PrestoSQL. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-connector-jmx | Ubah nilai dalam file jmx.properties PrestoSQL. | Not available. | 
| prestosql-connector-kafka | Ubah nilai dalam file kafka.properties PrestoSQL. | Not available. | 
| prestosql-connector-localfile | Ubah nilai dalam file localfile.properties PrestoSQL. | Not available. | 
| prestosql-connector-memory | Ubah nilai dalam file memory.properties PrestoSQL. | Not available. | 
| prestosql-connector-mongodb | Ubah nilai dalam file mongodb.properties PrestoSQL. | Not available. | 
| prestosql-connector-mysql | Ubah nilai dalam file mysql.properties PrestoSQL. | Not available. | 
| prestosql-connector-postgresql | Ubah nilai dalam file postgresql.properties PrestoSQL. | Not available. | 
| prestosql-connector-raptor | Ubah nilai dalam file raptor.properties PrestoSQL. | Not available. | 
| prestosql-connector-redis | Ubah nilai dalam file redis.properties PrestoSQL. | Not available. | 
| prestosql-connector-redshift | Ubah nilai dalam file redshift.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpch | Ubah nilai dalam file tpch.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpcds | Ubah nilai dalam file tpcds.properties PrestoSQL. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.2.0
<a name="emr-620-release"></a>

## versi aplikasi 6.2.0
<a name="emr-620-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyter-enterprise-gateway.readthedocs.io/en/latest/](https://jupyter-enterprise-gateway.readthedocs.io/en/latest/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://prestosql.io/](https://prestosql.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.2.0 | emr-6.1.1 | emr-6.1.0 | emr-6.0.1 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.880 | 1.11.828 | 1.11.828 | 1.11.711 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.12.10 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.11.2 | 1.11.0 | 1.11.0 |  -  | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.6-amzn-0 | 2.2.5 | 2.2.5 | 2.2.3 | 
| HCatalog | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 
| Hadoop | 3.2.1-amzn-2 | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 3.2.1-amzn-0.1 | 
| Hive | Versi 3.1.2 amzn-3 | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 
| Hudi | 0.6.0-amzn-1 | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 0.5.0-incubating-amzn-1 | 
| Hue | 4.8.0 | 4.7.1 | 4.7.1 | 4.4.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway | 2.1.0 |  -  |  -  |  -  | 
| JupyterHub | 1.1.0 | 1.1.0 | 1.1.0 | 1.0.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 
| MXNet | 1.7.0 | 1.6.0 | 1.6.0 | 1.5.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.0 | 5.2.0 | 5.2.0 | 5.1.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 | 0.17.0 |  -  | 
| Presto | 0.238.3-amzn-1 | 0,232 | 0,232 | 0,230 | 
| Spark | 3.0.1-amzn-0 | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 2.4.4 | 
| Sqoop | 1.4.7 | 1.4.7 | 1.4.7 |  -  | 
| TensorFlow | 2.3.1 | 2.1.0 | 2.1.0 | 1.14.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 343 | 338 | 338 |  -  | 
| Zeppelin | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-SNAPSHOT | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## catatan rilis 6.2.0
<a name="emr-620-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.2.0. Perubahan bersifat relatif terhadap versi 6.1.0.

Tanggal rilis awal: 09 Desember 2020

Tanggal terakhir dimutakhirkan: Okt 04, 2021

**Aplikasi-aplikasi yang didukung**
+ AWS SDK untuk Java versi 1.11.828
+ emr-record-server versi 1.7.0
+ Flink versi 1.11.2
+ Ganglia versi 3.7.2
+ Hadoop versi 3.2.1-amzn-1
+ HBase versi 2.2.6-amzn-0
+ HBase-operator-tools 1.0.0
+ HCatalog versi 3.1.2-amzn-0
+ Hive versi 3.1.2-amzn-3
+ Hudi versi 0.6.0-amzn-1
+ Hue versi 4.8.0
+ JupyterHub versi 1.1.0
+ Livy versi 0.7.0
+ MXNet versi 1.7.0
+ Oozie versi 5.2.0
+ Phoenix versi 5.0.0
+ Pig versi 0.17.0
+ Presto versi 0.238.3-amzn-1
+ PrestoSQL versi 343
+ Spark versi 3.0.1-amzn-0
+ spark-rapids versi 0.2.0
+ TensorFlow versi 2.3.1
+ Zeppelin versi 0.9.0-preview1
+ Zookeeper versi 3.4.14
+ Konektor dan driver: DynamoDB Connector 4.16.0

**Fitur baru**
+ HBase: Menghapus ganti nama dalam fase komit dan menambahkan HFile pelacakan persisten. Lihat [ HFile Pelacakan Persisten](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-hbase-s3.html#emr-hbase-s3-hfile-tracking) di *Panduan Rilis EMR Amazon*.
+ HBase: Backported [Buat konfigurasi yang memaksa untuk menyimpan blok](https://issues.apache.org/jira/browse/HBASE-23066) pada pemadatan.
+ PrestoDB: Perbaikan Pemangkasan Partisi Dinamis. Join Reorder berbasis aturan bekerja pada data non-partisi.
+ Kebijakan terkelola cakupan: Untuk menyelaraskan dengan praktik AWS terbaik, Amazon EMR telah memperkenalkan kebijakan terkelola default cakupan EMR v2 sebagai pengganti kebijakan yang tidak digunakan lagi. Lihat [Kebijakan Terkelola Amazon EMR](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-managed-iam-policies.html).
+ Status dukungan Instance Metadata Service (IMDS) V2: Untuk Amazon EMR 6.2 atau yang lebih baru, komponen EMR Amazon digunakan untuk semua panggilan IMDS. IMDSv2 Untuk panggilan IMDS dalam kode aplikasi Anda, Anda dapat menggunakan keduanya IMDSv1 dan IMDSv2, atau mengkonfigurasi IMDS untuk digunakan hanya IMDSv2 untuk keamanan tambahan. Jika Anda menonaktifkan IMDSv1 di rilis Amazon EMR 6.x sebelumnya, ini menyebabkan kegagalan startup cluster.

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ Spark: Perbaikan performa dalam waktu aktif Spark.

**Masalah yang diketahui**
+ Amazon EMR 6.2 memiliki izin yang salah disetel pada direktori/etc/cron.d/libinstance-controller-java file in EMR 6.2.0. Permissions on the file are 645 (-rw-r--r-x), when they should be 644 (-rw-r--r--). As a result, Amazon EMR version 6.2 does not log instance-state logs, and the /emr/instance-logs kosong. Masalah ini diperbaiki di Amazon EMR 6.3.0 dan yang lebih baru.

  Untuk mengatasi masalah ini, jalankan skrip berikut sebagai tindakan bootstrap saat peluncuran cluster. 

  ```
  #!/bin/bash
  sudo chmod 644 /etc/cron.d/libinstance-controller-java
  ```
+ Untuk Amazon EMR 6.2.0 dan 6.3.0 kluster subnet pribadi, Anda tidak dapat mengakses UI web Ganglia. Anda akan mendapatkan pesan kesalahan "akses ditolak (403)". Web lain UIs, seperti Spark, Hue,, Zeppelin JupyterHub, Livy, dan Tez bekerja secara normal. Akses UI web Ganglia pada klaster subnet publik juga bekerja secara normal. Untuk mengatasi masalah ini, mulai ulang layanan httpd pada node utama dengan`sudo systemctl restart httpd`. Masalah ini telah diperbaiki di Amazon EMR 6.4.0.
+ Ada masalah pada Amazon EMR 6.2.0 di mana httpd terus-menerus gagal, sehingga menyebabkan Ganglia tidak tersedia. Anda mendapatkan pesan kesalahan "tidak dapat menyambung ke server". Untuk memperbaiki cluster yang sudah berjalan dengan masalah ini, SSH ke node utama cluster dan tambahkan baris `Listen 80` ke file yang `httpd.conf` terletak di`/etc/httpd/conf/httpd.conf`. Masalah ini telah diperbaiki pada Amazon EMR 6.3.0.
+ HTTPD gagal pada klaster EMR 6.2.0 ketika Anda menggunakan konfigurasi keamanan. Hal ini membuat antarmuka pengguna aplikasi web Ganglia tidak tersedia. Untuk mengakses antarmuka pengguna aplikasi web Ganglia, tambahkan `Listen 80` ke `/etc/httpd/conf/httpd.conf` file pada node utama cluster Anda. Untuk informasi tentang menghubungkan ke cluster Anda, lihat [Connect to the Primary Node Using SSH](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-connect-master-node-ssh.html).

  EMR Notebooks juga gagal untuk membuat sambungan dengan klaster EMR 6.2.0 bila Anda menggunakan konfigurasi keamanan. Notebook tersebut akan gagal untuk membuat daftar kernel dan mengirimkan tugas Spark. Kami merekomendasikan agar Anda menggunakan EMR Notebooks dengan Amazon EMR versi lainnya sebagai gantinya.
+ **Turunkan batas “Maks open files” pada yang lebih lama AL2 [diperbaiki dalam rilis yang lebih baru].** Rilis Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0, dan emr-6.2.0 didasarkan pada versi lama dari Amazon Linux 2 (), yang memiliki pengaturan ulimit yang lebih rendah untuk “File terbuka maksimum” ketika kluster Amazon EMR dibuat dengan AMI default. AL2 Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi. Rilis dengan batas file terbuka yang lebih rendah menyebabkan kesalahan “Terlalu banyak file terbuka” saat mengirimkan pekerjaan Spark. Dalam rilis yang terkena dampak, AMI default Amazon EMR memiliki pengaturan ulimit default 4096 untuk “File terbuka maksimum,” yang lebih rendah dari batas file 65536 di AMI Amazon Linux 2 terbaruAmazon. Pengaturan ulimit yang lebih rendah untuk "Maksimal file terbuka" menyebabkan kegagalan tugas Spark ketika driver dan pelaksana mencoba untuk membuka lebih dari 4096 file. Untuk memperbaiki masalah, Amazon EMR memiliki skrip tindakan bootstrap (BA) yang menyesuaikan pengaturan ulimit saat pembuatan klaster. 

  Jika Anda menggunakan versi EMR Amazon yang lebih lama yang tidak memiliki perbaikan permanen untuk masalah ini, solusi berikut memungkinkan Anda untuk secara eksplisit mengatur ulimit pengontrol instans ke maksimum 65536 file.

**Mengatur secara eksplisit ulimit dari baris perintah**

  1. Edit `/etc/systemd/system/instance-controller.service` untuk menambahkan parameter berikut ke bagian Layanan.

     `LimitNOFILE=65536`

     `LimitNPROC=65536`

  1. Mulai ulang InstanceController

     `$ sudo systemctl daemon-reload`

     `$ sudo systemctl restart instance-controller`

  **Tetapkan ulimit menggunakan tindakan bootstrap (BA)**

  Anda juga dapat menggunakan skrip tindakan bootstrap (BA) untuk mengkonfigurasi ulimit instans-pengendali menjadi 65536 file saat pembuatan klaster.

  ```
  #!/bin/bash
  for user in hadoop spark hive; do
  sudo tee /etc/security/limits.d/$user.conf << EOF
  $user - nofile 65536
  $user - nproc 65536
  EOF
  done
  for proc in instancecontroller logpusher; do
  sudo mkdir -p /etc/systemd/system/$proc.service.d/
  sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF
  [Service]
  LimitNOFILE=65536
  LimitNPROC=65536
  EOF
  pid=$(pgrep -f aws157.$proc.Main)
  sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535
  done
  sudo systemctl daemon-reload
  ```
+ 
**penting**  
Amazon EMR 6.1.0 dan 6.2.0 mempunyai masalah performa yang secara kritis dapat mempengaruhi semua operasi insert, upsert, dan delete Hudi. Jika Anda berencana untuk menggunakan Hudi dengan Amazon EMR 6.1.0 atau 6.2.0, Anda harus AWS menghubungi dukungan untuk mendapatkan RPM Hudi yang ditambal.
+ 
**penting**  
Cluster EMR yang menjalankan Amazon Linux atau Amazon Linux 2 Amazon Machine Images (AMI) menggunakan perilaku default Amazon Linux, dan tidak secara otomatis mengunduh dan menginstal pembaruan kernel penting dan kritis yang memerlukan reboot. Ini adalah perilaku yang sama dengan instans Amazon EC2 lainnya yang menjalankan AMI Amazon Linux default. Jika pembaruan perangkat lunak Amazon Linux baru yang memerlukan reboot (seperti pembaruan kernel, NVIDIA, dan CUDA) tersedia setelah rilis EMR Amazon tersedia, instance cluster EMR yang menjalankan AMI default tidak secara otomatis mengunduh dan menginstal pembaruan tersebut. Untuk mendapatkan pembaruan kernel, Anda dapat [menyesuaikan Amazon EMR AMI](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-custom-ami.html) menjadi [gunakan Amazon Linux AMI terbaru](https://docs.aws.amazon.com/AWSEC2/latest/UserGuide/finding-an-ami.html).
+ Artefak Amazon EMR 6.2.0 Maven tidak dipublikasikan. Ia akan diterbitkan dengan rilis Amazon EMR yang akan datang.
+  HFile Pelacakan persisten menggunakan tabel sistem HBase storefile tidak mendukung fitur replikasi HBase wilayah. Untuk informasi selengkapnya tentang replikasi HBase wilayah, lihat Pembacaan Tersedia Tinggi [Konsisten Waktu](http://hbase.apache.org/book.html#arch.timelineconsistent.reads).
+ Perbedaan versi bucket Amazon EMR 6.x dan EMR 5.x Hive

  EMR 5.x menggunakan OOS Apache Hive 2, sedangkan di EMR 6.x menggunakan OOS Apache Hive 3. Hive2 sumber terbuka menggunakan Bucketing versi 1, sementara Hive3 sumber terbuka menggunakan Bucketing versi 2. Perbedaan versi bucket antara Hive 2 (EMR 5.x) dan Hive 3 (EMR 6.x) berarti pem-bucket-an Hive melakukan hashing fungsi yang berbeda. Lihat contoh di bawah ini.

  Tabel berikut adalah contoh yang dibuat di EMR 6.x dan EMR 5.x, berurutan.

  ```
  -- Using following LOCATION in EMR 6.x
  CREATE TABLE test_bucketing (id INT, desc STRING)
  PARTITIONED BY (day STRING)
  CLUSTERED BY(id) INTO 128 BUCKETS
  LOCATION 's3://your-own-s3-bucket/emr-6-bucketing/';
  
  -- Using following LOCATION in EMR 5.x 
  LOCATION 's3://your-own-s3-bucket/emr-5-bucketing/';
  ```

  Memasukkan data yang sama di EMR 6.x dan EMR 5.x.

  ```
  INSERT INTO test_bucketing PARTITION (day='01') VALUES(66, 'some_data');
  INSERT INTO test_bucketing PARTITION (day='01') VALUES(200, 'some_data');
  ```

  Memeriksa lokasi S3, menunjukkan nama file pem-bucket-an yang berbeda, karena fungsi hashing yang berbeda antara EMR 6.x (Hive 3) dan EMR 5.x (Hive 2).

  ```
  [hadoop@ip-10-0-0-122 ~]$ aws s3 ls s3://your-own-s3-bucket/emr-6-bucketing/day=01/
  2020-10-21 20:35:16         13 000025_0
  2020-10-21 20:35:22         14 000121_0
  [hadoop@ip-10-0-0-122 ~]$ aws s3 ls s3://your-own-s3-bucket/emr-5-bucketing/day=01/
  2020-10-21 20:32:07         13 000066_0
  2020-10-21 20:32:51         14 000072_0
  ```

  Anda juga dapat melihat perbedaan versi dengan menjalankan perintah berikut di Hive CLI di EMR 6.x. Perhatikan bahwa ia menghasilkan pem-bucket-an versi 2.

  ```
  hive> DESCRIBE FORMATTED test_bucketing;
  ...
  Table Parameters:
      bucketing_version       2
  ...
  ```
+ Masalah yang diketahui dalam cluster dengan beberapa node primer dan otentikasi Kerberos

  Jika Anda menjalankan cluster dengan beberapa node utama dan otentikasi Kerberos di Amazon EMR rilis 5.20.0 dan yang lebih baru, Anda mungkin mengalami masalah dengan operasi klaster seperti penurunan skala atau pengiriman langkah, setelah klaster berjalan selama beberapa waktu. Periode waktunya tergantung pada masa validitas tiket Kerberos yang Anda tetapkan. Masalah menurunkan skala akan berdampak pada permintaan menurunkan skala otomatis dan permintaan menurunkan skala eksplisit yang Anda kirimkan. Operasi klaster tambahan juga dapat terkena dampak. 

  Pemecahan masalah:
  + SSH sebagai `hadoop` pengguna ke node utama utama dari cluster EMR dengan beberapa node primer.
  +  Jalankan perintah berikut untuk memperbarui tiket Kerberos untuk pengguna `hadoop`. 

    ```
    kinit -kt <keytab_file> <principal>
    ```

    Biasanya, fail keytab terletak di `/etc/hadoop.keytab` dan file utama-nya dalam bentuk `hadoop/<hostname>@<REALM>`.
**catatan**  
Pemecahan masalah ini akan efektif untuk jangka waktu selama tiket Kerberos berlaku. Durasi ini adalah 10 jam secara default, tetapi dapat dikonfigurasi dengan pengaturan Kerberos Anda. Anda harus menjalankan kembali perintah di atas setelah tiket Kerberos berakhir.
+ Saat Anda menggunakan format lokasi partisi Spark dengan Hive untuk membaca data di Amazon S3, dan Anda menjalankan Spark di Amazon EMR rilis 5.30.0 hingga 5.36.0, dan 6.2.0 hingga 6.9.0, Anda mungkin mengalami masalah yang mencegah klaster membaca data dengan benar. Ini dapat terjadi jika partisi Anda memiliki semua karakteristik berikut:
  + Dua atau lebih partisi dipindai dari tabel yang sama.
  + Setidaknya satu jalur direktori partisi adalah awalan dari setidaknya satu jalur direktori partisi lainnya, misalnya, `s3://bucket/table/p=a` adalah awalan dari. `s3://bucket/table/p=a b`
  + Karakter pertama yang mengikuti awalan di direktori partisi lain memiliki nilai UTF-8 yang kurang dari `/` karakter (U\$1002F). Misalnya, karakter spasi (U\$10020) yang terjadi antara a dan b masuk `s3://bucket/table/p=a b` termasuk dalam kategori ini. Perhatikan bahwa ada 14 karakter non-kontrol lainnya:`!"#$%&‘()*+,-`. Untuk informasi selengkapnya, lihat [tabel pengkodean UTF-8 dan](https://www.utf8-chartable.de/) karakter Unicode.

  Sebagai solusi untuk masalah ini, setel `spark.sql.sources.fastS3PartitionDiscovery.enabled` konfigurasi ke `false` dalam klasifikasi. `spark-defaults`

## versi komponen 6.2.0
<a name="emr-620-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.4.1 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.16.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.1.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-notebook-env | 1.0.0 | Conda env untuk emr notebook yang mencakup gateway jupyter korporasi | 
| emr-s3-dist-cp | 2.16.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.0.0 | EMR S3Select Connector | 
| emrfs | 2.44.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.11.2 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| flink-jobmanager-config | 1.11.2 | Mengelola sumber daya pada node EMR untuk Apache Flink. JobManager | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-2 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-2 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-2 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-2 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-2 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-2 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-2 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-2 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-2 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-2 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-2 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.6-amzn-0 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.6-amzn-0 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.6-amzn-0 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.6-amzn-0 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.6-amzn-0 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | Versi 3.1.2 amzn-3 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | Versi 3.1.2 amzn-3 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | Versi 3.1.2 amzn-3 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | Versi 3.1.2 amzn-3 | Klien baris perintah Hive. | 
| hive-hbase | Versi 3.1.2 amzn-3 | Klien Hive-hbase. | 
| hive-metastore-server | Versi 3.1.2 amzn-3 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | Versi 3.1.2 amzn-3 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.6.0-amzn-1 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.6.0-amzn-1 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-prestosql | 0.6.0-amzn-1 | Perpustakaan paket untuk menjalankan PrestoSQL dengan Hudi. | 
| hudi-spark | 0.6.0-amzn-1 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.8.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.1.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.7.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.64\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 10.1.243 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.0 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.0 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.4.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0.238.3-amzn-1 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0.238.3-amzn-1 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0.238.3-amzn-1 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| prestosql-coordinator | 343 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara prestosql-woorker. | 
| prestosql-worker | 343 | Layanan untuk mengeksekusi potongan kueri. | 
| prestosql-client | 343 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 3.4.3 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.0.1-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.0.1-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.0.1-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.0.1-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| spark-rapids | 0.2.0 | Plugin Nvidia Spark RAPIDS yang mempercepat Apache Spark dengan. GPUs | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.3.1 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0-preview1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## klasifikasi konfigurasi 6.2.0
<a name="emr-620-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).

Tindakan konfigurasi ulang terjadi ketika Anda menentukan konfigurasi untuk grup instans di klaster yang sedang berjalan. Amazon EMR hanya memulai tindakan konfigurasi ulang untuk klasifikasi yang Anda modifikasi. Untuk informasi selengkapnya, lihat [Lakukan konfigurasi ulang pada grup instans di klaster yang sedang berjalan](emr-configure-apps-running-cluster.md).


**Klasifikasi emr-6.2.0**  

| Klasifikasi | Deskripsi | Tindakan Konfigurasi Ulang | 
| --- | --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | Restarts the ResourceManager service. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | Not available. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | Not available. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Ranger KMS, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| docker-conf | Ubah pengaturan terkait docker. | Not available. | 
| emrfs-site | Ubah pengaturan EMRFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts HBaseRegionserver, HBaseMaster, HBaseThrift, HBaseRest, HiveServer2, Hive MetaStore, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | Not available. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | Not available. | 
| flink-log4j-yarn-session | Ubah pengaturan Flink log4 j-yarn-session .properties. | Not available. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | Not available. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts PhoenixQueryserver, HiveServer2, Hive MetaStore, and MapReduce-HistoryServer. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | Restarts the Hadoop HDFS services SecondaryNamenode, Datanode, and Journalnode. Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Hadoop KMS, Hadoop Httpfs, and MapReduce-HistoryServer. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | Not available. | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | Not available. | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | Custom EMR specific property. Sets emrfs-site and hbase-site configs. See those for their associated restarts. | 
| hbase-env | Ubah nilai HBase di lingkungan. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | Not available. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | Restarts the HBase services RegionServer, HBaseMaster, ThriftServer, RestServer. Additionally restarts Phoenix QueryServer. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | This classification should not be reconfigured. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | Restarts Hadoop HDFS ZKFC. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | Restarts the Hadoop HDFS services Namenode, SecondaryNamenode, Datanode, ZKFC, and Journalnode. Additionally restarts Hadoop Httpfs. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | Restarts Hive HCatalog Server. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | Restarts Hive HCatalog Server. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | Restarts Hive HCatalog Server. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | Restarts Hive WebHCat server. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | Restarts Hive WebHCat server. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | Sets configurations to launch Hive LLAP service. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | Not available. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | Not available. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | Not available. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | Not available. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | Not available. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | Restarts HiveServer2, HiveMetastore, and Hive HCatalog-Server. Runs Hive schemaTool CLI commands to verify hive-metastore. Also restarts Oozie and Zeppelin. | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | Not available. | 
| hue-ini | Ubah nilai dalam file ini Hue | Restarts Hue. Also activates Hue config override CLI commands to pick up new configurations. | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | Restarts Hadoop Httpfs service. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | Restarts Hadoop Httpfs service. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | Not available. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | Restarts Hadoop-KMS service. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | Not available. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | Restarts Hadoop-KMS and Ranger-KMS service. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | Not available. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | Not available. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | Not available. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | Not available. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | Not available. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | Restarts Livy Server. | 
| livy-env | Ubah nilai di lingkungan Livy. | Restarts Livy Server. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | Restarts Livy Server. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | Restarts Hadoop MapReduce-HistoryServer. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | Restarts Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | Restarts Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | Restarts Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | Not available. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | Not available. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | Restarts Phoenix-QueryServer. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | Not available. | 
| pig-env | Ubah nilai di lingkungan Pig. | Not available. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | Restarts Oozie. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | Not available. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Not available. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-node | Ubah nilai dalam file node.properties Presto. | Not available. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | Not available. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | Not available. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | Restarts Presto-Server (for PrestoDB) | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | Not available. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | Not available. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | Not available. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | Not available. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | Not available. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | Not available. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | Not available. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | Not available. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | Not available. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | Not available. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | Not available. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | Not available. | 
| prestosql-log | Ubah nilai dalam file log.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-config | Ubah nilai dalam file config.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-env | Ubah nilai dalam file presto-env.sh Presto. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-node | Ubah nilai dalam file node.properties PrestoSQL. | Not available. | 
| prestosql-connector-blackhole | Ubah nilai dalam file blackhole.properties PrestoSQL. | Not available. | 
| prestosql-connector-cassandra | Ubah nilai dalam file cassandra.properties PrestoSQL. | Not available. | 
| prestosql-connector-hive | Ubah nilai dalam file hive.properties PrestoSQL. | Restarts Presto-Server (for PrestoSQL) | 
| prestosql-connector-jmx | Ubah nilai dalam file jmx.properties PrestoSQL. | Not available. | 
| prestosql-connector-kafka | Ubah nilai dalam file kafka.properties PrestoSQL. | Not available. | 
| prestosql-connector-localfile | Ubah nilai dalam file localfile.properties PrestoSQL. | Not available. | 
| prestosql-connector-memory | Ubah nilai dalam file memory.properties PrestoSQL. | Not available. | 
| prestosql-connector-mongodb | Ubah nilai dalam file mongodb.properties PrestoSQL. | Not available. | 
| prestosql-connector-mysql | Ubah nilai dalam file mysql.properties PrestoSQL. | Not available. | 
| prestosql-connector-postgresql | Ubah nilai dalam file postgresql.properties PrestoSQL. | Not available. | 
| prestosql-connector-raptor | Ubah nilai dalam file raptor.properties PrestoSQL. | Not available. | 
| prestosql-connector-redis | Ubah nilai dalam file redis.properties PrestoSQL. | Not available. | 
| prestosql-connector-redshift | Ubah nilai dalam file redshift.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpch | Ubah nilai dalam file tpch.properties PrestoSQL. | Not available. | 
| prestosql-connector-tpcds | Ubah nilai dalam file tpcds.properties PrestoSQL. | Not available. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | Restarts Ranger KMS Server. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | Not available. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | Not available. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | This property modifies spark-defaults. See actions there. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-env | Ubah nilai di lingkungan Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | Not available. | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | Restarts Spark history server and Spark thrift server. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | Not available. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | Not available. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | Not available. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | Restart Oozie. | 
| yarn-env | Ubah nilai di lingkungan YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts MapReduce-HistoryServer. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | Restarts the Hadoop YARN services ResourceManager, NodeManager, ProxyServer, and TimelineServer. Additionally restarts Livy Server and MapReduce-HistoryServer. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | Restarts Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | Restarts Zookeeper server. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | Restarts Zookeeper server. | 

# Amazon EMR rilis 6.1.1
<a name="emr-611-release"></a>

## 6.1.1 versi aplikasi
<a name="emr-611-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://prestosql.io/](https://prestosql.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.1.1 | emr-6.1.0 | emr-6.0.1 | emr-6.0.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.828 | 1.11.828 | 1.11.711 | 1.11.711 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.11.12 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.11.0 | 1.11.0 |  -  |  -  | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.5 | 2.2.5 | 2.2.3 | 2.2.3 | 
| HCatalog | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hadoop | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 3.2.1-amzn-0.1 | 3.2.1-amzn-0 | 
| Hive | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hudi | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 0.5.0-incubating-amzn-1 | 0.5.0-incubating-amzn-1 | 
| Hue | 4.7.1 | 4.7.1 | 4.4.0 | 4.4.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway |  -  |  -  |  -  |  -  | 
| JupyterHub | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 
| MXNet | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 |  -  |  -  | 
| Presto | 0,232 | 0,232 | 0,230 | 0,230 | 
| Spark | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 2.4.4 | 2.4.4 | 
| Sqoop | 1.4.7 | 1.4.7 |  -  |  -  | 
| TensorFlow | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 338 | 338 |  -  |  -  | 
| Zeppelin | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-SNAPSHOT | 0.9.0-SNAPSHOT | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## 6.1.1 catatan rilis
<a name="emr-611-relnotes"></a>

Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ HTTPS sekarang diaktifkan secara default untuk repositori Amazon Linux. Jika Anda menggunakan kebijakan Amazon S3 VPCE untuk membatasi akses ke bucket tertentu, Anda harus menambahkan ARN bucket Amazon Linux baru `arn:aws:s3:::amazonlinux-2-repos-$region/*` ke kebijakan Anda (ganti `$region` dengan wilayah tempat titik akhir berada). Untuk informasi lebih lanjut, lihat topik ini di forum AWS diskusi. [Pengumuman: Amazon Linux 2 sekarang mendukung kemampuan untuk menggunakan HTTPS saat menghubungkan ke repositori paket](https://forums.aws.amazon.com/ann.jspa?annID=8528). 

## 6.1.1 versi komponen
<a name="emr-611-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.3.0 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.14.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.1.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-s3-dist-cp | 2.14.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.0.0 | EMR S3Select Connector | 
| emrfs | 2.42.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.11.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-1.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-1.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-1.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-1.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-1.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-1.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-1.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-1.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-1.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-1.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-1.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.5 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.5 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.5 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.5 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.5 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | Versi 3.1.2-amzn-2 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | Versi 3.1.2-amzn-2 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | Versi 3.1.2-amzn-2 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | Versi 3.1.2-amzn-2 | Klien baris perintah Hive. | 
| hive-hbase | Versi 3.1.2-amzn-2 | Klien Hive-hbase. | 
| hive-metastore-server | Versi 3.1.2-amzn-2 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | Versi 3.1.2-amzn-2 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.5.2-incubating-amzn-2 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.5.2-incubating-amzn-2 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-prestosql | 0.5.2-incubating-amzn-2 | Perpustakaan paket untuk menjalankan PrestoSQL dengan Hudi. | 
| hudi-spark | 0.5.2-incubating-amzn-2 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.7.1 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.1.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.6.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.64\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 9.2.88 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.0 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.0 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.3.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,232 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,232 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,232 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| prestosql-coordinator | 338 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara prestosql-woorker. | 
| prestosql-worker | 338 | Layanan untuk mengeksekusi potongan kueri. | 
| prestosql-client | 338 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 3.4.3 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.0.0-amzn-0.1 | Klien baris perintah Spark. | 
| spark-history-server | 3.0.0-amzn-0.1 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.0.0-amzn-0.1 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.0.0-amzn-0.1 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.1.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0-preview1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## 6.1.1 klasifikasi konfigurasi
<a name="emr-611-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).


**klasifikasi emr-6.1.1**  

| Klasifikasi | Deskripsi | 
| --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | 
| emrfs-site | Ubah pengaturan EMRFS. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | 
| flink-log4j-yarn-session | Ubah pengaturan Flink log4 j-yarn-session .properties. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | 
| hbase-env | Ubah nilai HBase di lingkungan. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | 
| hue-ini | Ubah nilai dalam file ini Hue | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | 
| livy-env | Ubah nilai di lingkungan Livy. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | 
| pig-env | Ubah nilai di lingkungan Pig. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | 
| presto-config | Ubah nilai dalam file config.properties Presto. | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | 
| presto-node | Ubah nilai dalam file node.properties Presto. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | 
| prestosql-log | Ubah nilai dalam file log.properties Presto. | 
| prestosql-config | Ubah nilai dalam file config.properties Presto. | 
| prestosql-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | 
| prestosql-env | Ubah nilai dalam file presto-env.sh Presto. | 
| prestosql-node | Ubah nilai dalam file node.properties PrestoSQL. | 
| prestosql-connector-blackhole | Ubah nilai dalam file blackhole.properties PrestoSQL. | 
| prestosql-connector-cassandra | Ubah nilai dalam file cassandra.properties PrestoSQL. | 
| prestosql-connector-hive | Ubah nilai dalam file hive.properties PrestoSQL. | 
| prestosql-connector-jmx | Ubah nilai dalam file jmx.properties PrestoSQL. | 
| prestosql-connector-kafka | Ubah nilai dalam file kafka.properties PrestoSQL. | 
| prestosql-connector-localfile | Ubah nilai dalam file localfile.properties PrestoSQL. | 
| prestosql-connector-memory | Ubah nilai dalam file memory.properties PrestoSQL. | 
| prestosql-connector-mongodb | Ubah nilai dalam file mongodb.properties PrestoSQL. | 
| prestosql-connector-mysql | Ubah nilai dalam file mysql.properties PrestoSQL. | 
| prestosql-connector-postgresql | Ubah nilai dalam file postgresql.properties PrestoSQL. | 
| prestosql-connector-raptor | Ubah nilai dalam file raptor.properties PrestoSQL. | 
| prestosql-connector-redis | Ubah nilai dalam file redis.properties PrestoSQL. | 
| prestosql-connector-redshift | Ubah nilai dalam file redshift.properties PrestoSQL. | 
| prestosql-connector-tpch | Ubah nilai dalam file tpch.properties PrestoSQL. | 
| prestosql-connector-tpcds | Ubah nilai dalam file tpcds.properties PrestoSQL. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | 
| spark-env | Ubah nilai di lingkungan Spark. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | 
| yarn-env | Ubah nilai di lingkungan YARN. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | 

# Amazon EMR Rilis 6.1.0
<a name="emr-610-release"></a>

## versi aplikasi 6.1.0
<a name="emr-610-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [https://flink.apache.org/](https://flink.apache.org/), [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [https://hudi.apache.org](https://hudi.apache.org), [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [http://pig.apache.org/](http://pig.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://prestosql.io/](https://prestosql.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [http://sqoop.apache.org/](http://sqoop.apache.org/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.1.1 | emr-6.1.0 | emr-6.0.1 | emr-6.0.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.828 | 1.11.828 | 1.11.711 | 1.11.711 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.11.12 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.11.0 | 1.11.0 |  -  |  -  | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.5 | 2.2.5 | 2.2.3 | 2.2.3 | 
| HCatalog | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hadoop | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 3.2.1-amzn-0.1 | 3.2.1-amzn-0 | 
| Hive | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hudi | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 0.5.0-incubating-amzn-1 | 0.5.0-incubating-amzn-1 | 
| Hue | 4.7.1 | 4.7.1 | 4.4.0 | 4.4.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway |  -  |  -  |  -  |  -  | 
| JupyterHub | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 
| MXNet | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 |  -  |  -  | 
| Presto | 0,232 | 0,232 | 0,230 | 0,230 | 
| Spark | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 2.4.4 | 2.4.4 | 
| Sqoop | 1.4.7 | 1.4.7 |  -  |  -  | 
| TensorFlow | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 338 | 338 |  -  |  -  | 
| Zeppelin | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-SNAPSHOT | 0.9.0-SNAPSHOT | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## catatan rilis 6.1.0
<a name="emr-610-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk Amazon EMR rilis 6.1.0. Perubahan bersifat relatif terhadap versi 6.0.0.

Tanggal rilis awal: 04 September 2020

Tanggal terakhir diperbarui: 15 Oktober 2020

**Aplikasi-aplikasi yang didukung**
+ AWS SDK untuk Java versi 1.11.828
+ Flink versi 1.11.0
+ Ganglia versi 3.7.2
+ Hadoop versi 3.2.1-amzn-1
+ HBase versi 2.2.5
+ HBase-operator-tools 1.0.0
+ HCatalog versi 3.1.2-amzn-0
+ Hive versi 3.1.2-amzn-1
+ Hudi versi 0.5.2-incubating
+ Hue versi 4.7.1
+ JupyterHub versi 1.1.0
+ Livy versi 0.7.0
+ MXNet versi 1.6.0
+ Oozie versi 5.2.0
+ Phoenix versi 5.0.0
+ Presto versi 0.232
+ PrestoSQL versi 338
+ Spark versi 3.0.0-amzn-0
+ TensorFlow versi 2.1.0
+ Zeppelin versi 0.9.0-preview1
+ Zookeeper versi 3.4.14
+ Konektor dan driver: DynamoDB Connector 4.14.0

**Fitur baru**
+ Tipe instans ARM didukung mulai dari Amazon EMR versi 5.30.0 dan Amazon EMR versi 6.1.0.
+ Tipe instans tujuan umum M6g didukung mulai dengan Amazon EMR versi 6.1.0 dan 5.30.0. Untuk informasi selengkapnya, lihat [Tipe instans yang didukung](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-supported-instance-types.html) di *Panduan Pengelolaan Amazon EMR*.
+ Fitur grup penempatan EC2 didukung dimulai dengan Amazon EMR versi 5.23.0 sebagai opsi untuk beberapa kluster simpul utama. Saat ini, hanya tipe node primer yang didukung oleh fitur grup penempatan, dan `SPREAD` strategi diterapkan pada node utama tersebut. `SPREAD`Strategi ini menempatkan sekelompok kecil instance di perangkat keras dasar yang terpisah untuk mencegah hilangnya beberapa node primer jika terjadi kegagalan perangkat keras. Untuk informasi selengkapnya, lihat [Integrasi EMR dengan Grup Penempatan EC2](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-ha-placementgroup.html) di *Panduan Pengelolaan Amazon EMR*.
+ Penskalaan Terkelola - Dengan Amazon EMR versi 6.1.0, Anda dapat mengaktifkan penskalaan terkelola Amazon EMR untuk secara otomatis menambah atau mengurangi jumlah instans atau unit di klaster berdasarkan beban kerja. Amazon EMR terus mengevaluasi metrik klaster untuk membuat keputusan penskalaan yang mengoptimalkan kluster Anda untuk biaya dan kecepatan. Penskalaan Terkelola juga tersedia di Amazon EMR versi 5.30.0 dan setelahnya, kecuali versi 6.0.0. Untuk informasi selengkapnya, lihat [Penskalaan Sumber Daya Klaster](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-scale-on-demand.html) di *Panduan Pengelolaan Amazon EMR*.
+ PrestoSQL versi 338 didukung dengan EMR 6.1.0. Untuk informasi selengkapnya, lihat [Presto](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-presto.html).
  + PrestoSQL didukung pada EMR 6.1.0 dan hanya versi setelahnya, namun tidak pada EMR 6.0.0 atau EMR 5.x.
  + Nama aplikasi, `Presto` terus-menerus digunakan untuk menginstal PrestoDB pada klaster. Untuk menginstal PrestoSQL pada klaster, gunakan nama aplikasi `PrestoSQL`.
  + Anda dapat menginstal PrestoDB atau PrestoSQL, tetapi Anda tidak dapat menginstal keduanya pada satu klaster. Jika PrestoDB dan PrestoSQL keduanya ditentukan ketika mencoba untuk membuat sebuah klaster, maka akan terjadi kesalahan validasi dan permintaan pembuatan klaster gagal.
  + PrestoSQL didukung pada klaster single-master dan muti-master. Pada klaster multi-master, metastore Hive eksternal diperlukan untuk menjalankan PrestoSQL atau PrestoDB. Lihat [Aplikasi yang didukung dalam klaster EMR dengan beberapa node primer](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-ha-applications.html#emr-plan-ha-applications-list).
+ Support autentikasi otomatis ECR pada Apache Hadoop dan Apache Spark dengan Docker: pengguna Spark dapat menggunakan gambar Docker Hub dan Amazon Elastic Container Registry (Amazon ECR) untuk menentukan lingkungan dan dependensi perpustakaan.

  [Konfigurasi Docker](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-docker.html) dan [Jalankan Aplikasi Spark dengan Docker Menggunakan Amazon EMR 6.x](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-docker.html).
+ EMR mendukung transaksi Apache Hive ACID: Amazon EMR 6.1.0 menambahkan support untuk transaksi ACID Hive sehingga sesuai dengan properti basis data ACID. Dengan fitur ini, Anda dapat menjalankan `INSERT, UPDATE, DELETE,` dan `MERGE` mengoperasikannya di tabel terkelola Hive dengan data di Amazon Simple Storage Service (Amazon S3). Ini adalah fitur kunci untuk kasus penggunaan seperti menyerap streaming, pernyataan ulang data, update massal menggunakan MERGE, dan mengubah dimensi secara perlahan. Untuk informasi lebih lanjut, termasuk contoh konfigurasi dan kasus penggunaan, lihat [Amazon EMR mendukung transaksi Apache Hive ACID](https://aws.amazon.com/blogs/big-data/amazon-emr-supports-apache-hive-acid-transactions).

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ Apache Flink tidak didukung pada EMR 6.0.0, tetapi didukung pada EMR 6.1.0 dengan Flink 1.11.0. Ini adalah versi pertama Flink yang secara resmi mendukung Hadoop 3. Lihat [Pengumuman Rilis Apache Flink 1.11.0](https://flink.apache.org/news/2020/07/06/release-1.11.0.html).
+ Ganglia telah dihapus dari bundel paket default EMR 6.1.0.

**Masalah yang diketahui**
+ **Turunkan batas “Maks open files” pada yang lebih lama AL2 [diperbaiki dalam rilis yang lebih baru].** Rilis Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0, dan emr-6.2.0 didasarkan pada versi lama dari Amazon Linux 2 (), yang memiliki pengaturan ulimit yang lebih rendah untuk “File terbuka maksimum” ketika kluster Amazon EMR dibuat dengan AMI default. AL2 Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi. Rilis dengan batas file terbuka yang lebih rendah menyebabkan kesalahan “Terlalu banyak file terbuka” saat mengirimkan pekerjaan Spark. Dalam rilis yang terkena dampak, AMI default Amazon EMR memiliki pengaturan ulimit default 4096 untuk “File terbuka maksimum,” yang lebih rendah dari batas file 65536 di AMI Amazon Linux 2 terbaruAmazon. Pengaturan ulimit yang lebih rendah untuk "Maksimal file terbuka" menyebabkan kegagalan tugas Spark ketika driver dan pelaksana mencoba untuk membuka lebih dari 4096 file. Untuk memperbaiki masalah, Amazon EMR memiliki skrip tindakan bootstrap (BA) yang menyesuaikan pengaturan ulimit saat pembuatan klaster. 

  Jika Anda menggunakan versi EMR Amazon yang lebih lama yang tidak memiliki perbaikan permanen untuk masalah ini, solusi berikut memungkinkan Anda untuk secara eksplisit mengatur ulimit pengontrol instans ke maksimum 65536 file.

**Mengatur secara eksplisit ulimit dari baris perintah**

  1. Edit `/etc/systemd/system/instance-controller.service` untuk menambahkan parameter berikut ke bagian Layanan.

     `LimitNOFILE=65536`

     `LimitNPROC=65536`

  1. Mulai ulang InstanceController

     `$ sudo systemctl daemon-reload`

     `$ sudo systemctl restart instance-controller`

  **Tetapkan ulimit menggunakan tindakan bootstrap (BA)**

  Anda juga dapat menggunakan skrip tindakan bootstrap (BA) untuk mengkonfigurasi ulimit instans-pengendali menjadi 65536 file saat pembuatan klaster.

  ```
  #!/bin/bash
  for user in hadoop spark hive; do
  sudo tee /etc/security/limits.d/$user.conf << EOF
  $user - nofile 65536
  $user - nproc 65536
  EOF
  done
  for proc in instancecontroller logpusher; do
  sudo mkdir -p /etc/systemd/system/$proc.service.d/
  sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF
  [Service]
  LimitNOFILE=65536
  LimitNPROC=65536
  EOF
  pid=$(pgrep -f aws157.$proc.Main)
  sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535
  done
  sudo systemctl daemon-reload
  ```
+ 
**penting**  
Amazon EMR 6.1.0 dan 6.2.0 mempunyai masalah performa yang secara kritis dapat mempengaruhi semua operasi insert, upsert, dan delete Hudi. Jika Anda berencana untuk menggunakan Hudi dengan Amazon EMR 6.1.0 atau 6.2.0, Anda harus AWS menghubungi dukungan untuk mendapatkan RPM Hudi yang ditambal.
+ Jika Anda mengatur konfigurasi pengumpulan sampah khusus dengan `spark.driver.extraJavaOptions` dan`spark.executor.extraJavaOptions`, ini akan mengakibatkan kegagalan driver/executor peluncuran dengan EMR 6.1 karena konfigurasi pengumpulan sampah yang bertentangan. Dengan EMR Rilis 6.1.0, Anda harus menentukan konfigurasi pengumpulan sampah Spark kustom untuk driver dan pelaksana dengan properti `spark.driver.defaultJavaOptions` dan `spark.executor.defaultJavaOptions` sebagai gantinya. Baca selengkapnya di [Lingkungan Waktu Aktif Apache Spark](https://spark.apache.org/docs/latest/configuration.html#runtime-environment) dan [Mengkonfigurasi Pengumpulan Sampah Spark di Amazon EMR 6.1.0](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-configure.html#spark-gc-config).
+ Menggunakan Pig dengan Oozie (dan dalam Hue, karena Hue menggunakan tindakan Oozie untuk menjalankan skrip Pig), akan menghasilkan kesalahan di mana perpustakaan native-lzo tidak dapat dimuat. Pesan kesalahan ini adalah informasi dan tidak memblokir Pig sehingga tidak berjalan.
+ Hudi Concurrency Support: Saat ini Hudi tidak mendukung tulis bersamaan ke tabel Hudi tunggal. Selain itu, Hudi membatalkan setiap perubahan yang dilakukan oleh penulis yang sedang berlangsung sebelum mengizinkan penulis baru untuk memulai. Tulis bersamaan dapat mengganggu mekanisme ini dan memperkenalkan kondisi ras, yang dapat menyebabkan korupsi data. Anda harus memastikan bahwa sebagai bagian dari alur kerja pengolahan data Anda, hanya ada satu penulis Hudi yang beroperasi terhadap tabel Hudi setiap saat. Hudi tidak mendukung beberapa pembaca bersamaan yang beroperasi terhadap tabel Hudi yang sama.
+ Masalah yang diketahui dalam cluster dengan beberapa node primer dan otentikasi Kerberos

  Jika Anda menjalankan cluster dengan beberapa node utama dan otentikasi Kerberos di Amazon EMR rilis 5.20.0 dan yang lebih baru, Anda mungkin mengalami masalah dengan operasi klaster seperti penurunan skala atau pengiriman langkah, setelah klaster berjalan selama beberapa waktu. Periode waktunya tergantung pada masa validitas tiket Kerberos yang Anda tetapkan. Masalah menurunkan skala akan berdampak pada permintaan menurunkan skala otomatis dan permintaan menurunkan skala eksplisit yang Anda kirimkan. Operasi klaster tambahan juga dapat terkena dampak. 

  Pemecahan masalah:
  + SSH sebagai `hadoop` pengguna ke node utama utama dari cluster EMR dengan beberapa node primer.
  +  Jalankan perintah berikut untuk memperbarui tiket Kerberos untuk pengguna `hadoop`. 

    ```
    kinit -kt <keytab_file> <principal>
    ```

    Biasanya, fail keytab terletak di `/etc/hadoop.keytab` dan file utama-nya dalam bentuk `hadoop/<hostname>@<REALM>`.
**catatan**  
Pemecahan masalah ini akan efektif untuk jangka waktu selama tiket Kerberos berlaku. Durasi ini adalah 10 jam secara default, tetapi dapat dikonfigurasi dengan pengaturan Kerberos Anda. Anda harus menjalankan kembali perintah di atas setelah tiket Kerberos berakhir.
+ Ada masalah di Amazon EMR 6.1.0 yang mempengaruhi klaster yang menjalankan Presto. Setelah perpanjangan jangka waktu (hari), klaster mungkin membuang kesalahan seperti, "su: gagal untuk mengeksekusi/bin/bash: sumber daya sementara tidak tersedia" atau "permintaan shell gagal pada saluran 0". Masalah ini disebabkan oleh proses EMR Amazon internal (InstanceController) yang menghasilkan terlalu banyak Proses Berat Ringan (LWP), yang akhirnya menyebabkan pengguna Hadoop melebihi batas nproc mereka. Hal ini mencegah pengguna dari membuka proses tambahan. Solusi untuk masalah ini adalah dengan meng-upgrade ke EMR 6.2.0.

## versi komponen 6.1.0
<a name="emr-610-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.3.0 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.14.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.1.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-s3-dist-cp | 2.14.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 2.0.0 | EMR S3Select Connector | 
| emrfs | 2.42.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| flink-client | 1.11.0 | Skrip dan aplikasi klien baris perintah Apache Flink. | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | Versi 3.2.1-amzn-1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | Versi 3.2.1-amzn-1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | Versi 3.2.1-amzn-1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | Versi 3.2.1-amzn-1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | Versi 3.2.1-amzn-1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | Versi 3.2.1-amzn-1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | Versi 3.2.1-amzn-1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | Versi 3.2.1-amzn-1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | Versi 3.2.1-amzn-1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | Versi 3.2.1-amzn-1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | Versi 3.2.1-amzn-1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.5 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.5 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.5 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.5 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.5 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | Versi 3.1.2-amzn-2 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | Versi 3.1.2-amzn-2 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | Versi 3.1.2-amzn-2 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | Versi 3.1.2-amzn-2 | Klien baris perintah Hive. | 
| hive-hbase | Versi 3.1.2-amzn-2 | Klien Hive-hbase. | 
| hive-metastore-server | Versi 3.1.2-amzn-2 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | Versi 3.1.2-amzn-2 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.5.2-incubating-amzn-2 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.5.2-incubating-amzn-2 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hudi-prestosql | 0.5.2-incubating-amzn-2 | Perpustakaan paket untuk menjalankan PrestoSQL dengan Hudi. | 
| hudi-spark | 0.5.2-incubating-amzn-2 | Perpustakaan paket untuk menjalankan Spark dengan Hudi. | 
| hue-server | 4.7.1 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.1.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.7.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.6.0 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.64\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 9.2.88 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.2.0 | Klien baris perintah Oozie. | 
| oozie-server | 5.2.0 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 4.3.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,232 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,232 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,232 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| prestosql-coordinator | 338 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara prestosql-woorker. | 
| prestosql-worker | 338 | Layanan untuk mengeksekusi potongan kueri. | 
| prestosql-client | 338 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| pig-client | 0.17.0 | Klien baris perintah Pig. | 
| r | 3.4.3 | Proyek R untuk Komputasi Statistik | 
| ranger-kms-server | 2.0.0 | Sistem Pengelolaan Kunci Ranger Apache | 
| spark-client | 3.0.0-amzn-0 | Klien baris perintah Spark. | 
| spark-history-server | 3.0.0-amzn-0 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 3.0.0-amzn-0 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 3.0.0-amzn-0 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| sqoop-client | 1.4.7 | Klien baris perintah Apache Sqoop. | 
| tensorflow | 2.1.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0-preview1 | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## klasifikasi konfigurasi 6.1.0
<a name="emr-610-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).


**klasifikasi emr-6.1.0**  

| Klasifikasi | Deskripsi | 
| --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | 
| emrfs-site | Ubah pengaturan EMRFS. | 
| flink-conf | Ubah pengaturan flink-conf.yaml. | 
| flink-log4j | Ubah pengaturan log4j.properties Flink. | 
| flink-log4j-yarn-session | Ubah pengaturan Flink log4 j-yarn-session .properties. | 
| flink-log4j-cli | Ubah pengaturan log4j-cli.properties Flink. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | 
| hbase-env | Ubah nilai HBase di lingkungan. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | 
| hue-ini | Ubah nilai dalam file ini Hue | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | 
| hudi-env | Ubah nilai di lingkungan Hudi. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | 
| livy-env | Ubah nilai di lingkungan Livy. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | 
| pig-env | Ubah nilai di lingkungan Pig. | 
| pig-properties | Ubah nilai dalam file pig.properties Pig. | 
| pig-log4j | Ubah nilai dalam file log4j.properties Pig. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | 
| presto-config | Ubah nilai dalam file config.properties Presto. | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | 
| presto-node | Ubah nilai dalam file node.properties Presto. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | 
| prestosql-log | Ubah nilai dalam file log.properties Presto. | 
| prestosql-config | Ubah nilai dalam file config.properties Presto. | 
| prestosql-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | 
| prestosql-env | Ubah nilai dalam file presto-env.sh Presto. | 
| prestosql-node | Ubah nilai dalam file node.properties PrestoSQL. | 
| prestosql-connector-blackhole | Ubah nilai dalam file blackhole.properties PrestoSQL. | 
| prestosql-connector-cassandra | Ubah nilai dalam file cassandra.properties PrestoSQL. | 
| prestosql-connector-hive | Ubah nilai dalam file hive.properties PrestoSQL. | 
| prestosql-connector-jmx | Ubah nilai dalam file jmx.properties PrestoSQL. | 
| prestosql-connector-kafka | Ubah nilai dalam file kafka.properties PrestoSQL. | 
| prestosql-connector-localfile | Ubah nilai dalam file localfile.properties PrestoSQL. | 
| prestosql-connector-memory | Ubah nilai dalam file memory.properties PrestoSQL. | 
| prestosql-connector-mongodb | Ubah nilai dalam file mongodb.properties PrestoSQL. | 
| prestosql-connector-mysql | Ubah nilai dalam file mysql.properties PrestoSQL. | 
| prestosql-connector-postgresql | Ubah nilai dalam file postgresql.properties PrestoSQL. | 
| prestosql-connector-raptor | Ubah nilai dalam file raptor.properties PrestoSQL. | 
| prestosql-connector-redis | Ubah nilai dalam file redis.properties PrestoSQL. | 
| prestosql-connector-redshift | Ubah nilai dalam file redshift.properties PrestoSQL. | 
| prestosql-connector-tpch | Ubah nilai dalam file tpch.properties PrestoSQL. | 
| prestosql-connector-tpcds | Ubah nilai dalam file tpcds.properties PrestoSQL. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | 
| spark-env | Ubah nilai di lingkungan Spark. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | 
| sqoop-env | Ubah nilai dalam lingkungan Sqoop. | 
| sqoop-oraoop-site | Ubah nilai dalam file oraoop-site.xml Sqoop OraOop ini. | 
| sqoop-site | Ubah nilai dalam file sqoop-site.xml Sqoop. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | 
| yarn-env | Ubah nilai di lingkungan YARN. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | 

# Amazon EMR rilis 6.0.1
<a name="emr-601-release"></a>

## 6.0.1 versi aplikasi
<a name="emr-601-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org),, [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.1.1 | emr-6.1.0 | emr-6.0.1 | emr-6.0.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.828 | 1.11.828 | 1.11.711 | 1.11.711 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.11.12 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.11.0 | 1.11.0 |  -  |  -  | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.5 | 2.2.5 | 2.2.3 | 2.2.3 | 
| HCatalog | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hadoop | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 3.2.1-amzn-0.1 | 3.2.1-amzn-0 | 
| Hive | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hudi | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 0.5.0-incubating-amzn-1 | 0.5.0-incubating-amzn-1 | 
| Hue | 4.7.1 | 4.7.1 | 4.4.0 | 4.4.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway |  -  |  -  |  -  |  -  | 
| JupyterHub | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 
| MXNet | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 |  -  |  -  | 
| Presto | 0,232 | 0,232 | 0,230 | 0,230 | 
| Spark | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 2.4.4 | 2.4.4 | 
| Sqoop | 1.4.7 | 1.4.7 |  -  |  -  | 
| TensorFlow | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 338 | 338 |  -  |  -  | 
| Zeppelin | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-SNAPSHOT | 0.9.0-SNAPSHOT | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## 6.0.1 catatan rilis
<a name="emr-601-relnotes"></a>

Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.

**Perubahan, Penyempurnaan, dan Masalah Terselesaikan**
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ HTTPS sekarang diaktifkan secara default untuk repositori Amazon Linux. Jika Anda menggunakan kebijakan Amazon S3 VPCE untuk membatasi akses ke bucket tertentu, Anda harus menambahkan ARN bucket Amazon Linux baru `arn:aws:s3:::amazonlinux-2-repos-$region/*` ke kebijakan Anda (ganti `$region` dengan wilayah tempat titik akhir berada). Untuk informasi lebih lanjut, lihat topik ini di forum AWS diskusi. [Pengumuman: Amazon Linux 2 sekarang mendukung kemampuan untuk menggunakan HTTPS saat menghubungkan ke repositori paket](https://forums.aws.amazon.com/ann.jspa?annID=8528). 

## 6.0.1 versi komponen
<a name="emr-601-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.2.6 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.14.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.0.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-s3-dist-cp | 2.14.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 1.5.0 | EMR S3Select Connector | 
| emrfs | 2.39.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-0.1 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-0.1 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-0.1 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-0.1 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-0.1 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-0.1 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-0.1 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-0.1 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-0.1 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-0.1 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-0.1 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.3 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.3 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.3 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.3 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.3 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | 3.1.2-amzn-0 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-0 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-0 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-0 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-0 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-0 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-0 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.5.0-incubating-amzn-1 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.5.0-incubating-amzn-1 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hue-server | 4.4.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.0.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.6.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.5.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.64\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 9.2.88 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.1.0 | Klien baris perintah Oozie. | 
| oozie-server | 5.1.0 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 3.4.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,230 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,230 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,230 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| r | 3.4.3 | Proyek R untuk Komputasi Statistik | 
| spark-client | 2.4.4 | Klien baris perintah Spark. | 
| spark-history-server | 2.4.4 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 2.4.4 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 2.4.4 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| tensorflow | 1.14.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0-SNAPSHOT | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## 6.0.1 klasifikasi konfigurasi
<a name="emr-601-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).


**klasifikasi emr-6.0.1**  

| Klasifikasi | Deskripsi | 
| --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | 
| emrfs-site | Ubah pengaturan EMRFS. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | 
| hbase-env | Ubah nilai HBase di lingkungan. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | 
| hue-ini | Ubah nilai dalam file ini Hue | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | 
| livy-env | Ubah nilai di lingkungan Livy. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | 
| presto-config | Ubah nilai dalam file config.properties Presto. | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | 
| presto-node | Ubah nilai dalam file node.properties Presto. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | 
| recordserver-env | Ubah nilai di lingkungan EMR RecordServer . | 
| recordserver-conf | Ubah nilai dalam file erver.properties EMR RecordServer. | 
| recordserver-log4j | Ubah nilai dalam file log4j.properties EMR RecordServer. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | 
| spark-env | Ubah nilai di lingkungan Spark. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | 
| yarn-env | Ubah nilai di lingkungan YARN. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. | 

# Amazon EMR Rilis 6.0.0
<a name="emr-600-release"></a>

## versi aplikasi 6.0.0
<a name="emr-600-app-versions"></a>

Rilis ini mencakup aplikasi berikut: [http://ganglia.info](http://ganglia.info), [http://hbase.apache.org/](http://hbase.apache.org/), [https://cwiki.apache.org/confluence/display/Hive/HCatalog](https://cwiki.apache.org/confluence/display/Hive/HCatalog), [http://hadoop.apache.org/docs/current/](http://hadoop.apache.org/docs/current/), [http://hive.apache.org/](http://hive.apache.org/), [https://hudi.apache.org](https://hudi.apache.org),, [http://gethue.com/](http://gethue.com/), [https://jupyterhub.readthedocs.io/en/latest/#](https://jupyterhub.readthedocs.io/en/latest/#), [https://livy.incubator.apache.org/](https://livy.incubator.apache.org/), [https://mxnet.incubator.apache.org/](https://mxnet.incubator.apache.org/), [http://oozie.apache.org/](http://oozie.apache.org/), [https://phoenix.apache.org/](https://phoenix.apache.org/), [https://prestodb.io/](https://prestodb.io/), [https://spark.apache.org/docs/latest/](https://spark.apache.org/docs/latest/), [https://www.tensorflow.org/](https://www.tensorflow.org/), [https://tez.apache.org/](https://tez.apache.org/), [https://zeppelin.incubator.apache.org/](https://zeppelin.incubator.apache.org/), dan [https://zookeeper.apache.org](https://zookeeper.apache.org).

Tabel di bawah ini mencantumkan versi aplikasi yang tersedia dalam rilis Amazon EMR ini dan versi aplikasi dalam tiga rilis EMR Amazon sebelumnya (bila berlaku).

Untuk riwayat lengkap versi aplikasi untuk setiap rilis Amazon EMR, lihat topik berikut:
+ [Versi aplikasi di Amazon EMR 7.x rilis](emr-release-app-versions-7.x.md)
+ [Versi aplikasi di Amazon EMR 6.x rilis](emr-release-app-versions-6.x.md)
+ [Versi aplikasi di Amazon EMR 5.x rilis](emr-release-app-versions-5.x.md)
+ [Versi aplikasi di Amazon EMR 4.x rilis](emr-release-app-versions-4.x.md)


**Informasi versi aplikasi**  

|  | emr-6.1.1 | emr-6.1.0 | emr-6.0.1 | emr-6.0.0 | 
| --- | --- | --- | --- | --- | 
| AWS SDK for Java | 1.11.828 | 1.11.828 | 1.11.711 | 1.11.711 | 
| Python | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 2.7, 3.7 | 
| Skala | 2.12.10 | 2.12.10 | 2.12.10 | 2.11.12 | 
| AmazonCloudWatchAgent |  -  |  -  |  -  |  -  | 
| Delta |  -  |  -  |  -  |  -  | 
| Flink | 1.11.0 | 1.11.0 |  -  |  -  | 
| Ganglia | 3.7.2 | 3.7.2 | 3.7.2 | 3.7.2 | 
| HBase | 2.2.5 | 2.2.5 | 2.2.3 | 2.2.3 | 
| HCatalog | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hadoop | 3.2.1-amzn-1.1 | Versi 3.2.1-amzn-1 | 3.2.1-amzn-0.1 | 3.2.1-amzn-0 | 
| Hive | Versi 3.1.2-amzn-2 | Versi 3.1.2-amzn-2 | 3.1.2-amzn-0 | 3.1.2-amzn-0 | 
| Hudi | 0.5.2-incubating-amzn-2 | 0.5.2-incubating-amzn-2 | 0.5.0-incubating-amzn-1 | 0.5.0-incubating-amzn-1 | 
| Hue | 4.7.1 | 4.7.1 | 4.4.0 | 4.4.0 | 
| Iceberg |  -  |  -  |  -  |  -  | 
| JupyterEnterpriseGateway |  -  |  -  |  -  |  -  | 
| JupyterHub | 1.1.0 | 1.1.0 | 1.0.0 | 1.0.0 | 
| Livy | 0.7.0-incubating | 0.7.0-incubating | 0.6.0-incubating | 0.6.0-incubating | 
| MXNet | 1.6.0 | 1.6.0 | 1.5.1 | 1.5.1 | 
| Mahout |  -  |  -  |  -  |  -  | 
| Oozie | 5.2.0 | 5.2.0 | 5.1.0 | 5.1.0 | 
| Phoenix | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 5.0.0- -2.0 HBase | 
| Pig | 0.17.0 | 0.17.0 |  -  |  -  | 
| Presto | 0,232 | 0,232 | 0,230 | 0,230 | 
| Spark | 3.0.0-amzn-0.1 | 3.0.0-amzn-0 | 2.4.4 | 2.4.4 | 
| Sqoop | 1.4.7 | 1.4.7 |  -  |  -  | 
| TensorFlow | 2.1.0 | 2.1.0 | 1.14.0 | 1.14.0 | 
| Tez | 0.9.2 | 0.9.2 | 0.9.2 | 0.9.2 | 
| Trino (PrestoSQL) | 338 | 338 |  -  |  -  | 
| Zeppelin | 0.9.0-preview1 | 0.9.0-preview1 | 0.9.0-SNAPSHOT | 0.9.0-SNAPSHOT | 
| ZooKeeper | 3.4.14 | 3.4.14 | 3.4.14 | 3.4.14 | 

## catatan rilis 6.0.0
<a name="emr-600-relnotes"></a>

Catatan rilis berikut mencakup informasi untuk rilis Amazon EMR 6.0.0.

Tanggal rilis awal: 10 Maret 2020

**Aplikasi-aplikasi yang didukung**
+ AWS SDK untuk Java versi 1.11.711
+ Ganglia versi 3.7.2
+ Hadoop versi 3.2.1
+ HBase versi 2.2.3
+ HCatalog versi 3.1.2
+ Hive versi 3.1.2
+ Hudi versi 0.5.0-incubating
+ Hue versi 4.4.0
+ JupyterHub versi 1.0.0
+ Livy versi 0.6.0
+ MXNet versi 1.5.1
+ Oozie versi 5.1.0
+ Phoenix versi 5.0.0
+ Presto versi 0.230
+ Spark versi 2.4.4
+ TensorFlow versi 1.14.0
+ Zeppelin versi 0.9.0-SNAPSHOT
+ Zookeeper versi 3.4.14
+ Konektor dan driver: DynamoDB Connector 4.14.0

**catatan**  
Flink, Sqoop, Babi, dan Mahout tidak tersedia di Amazon EMR versi 6.0.0. 

**Fitur baru**
+ YARN Docker Runtime Support - aplikasi YARN, seperti tugas Spark, sekarang dapat berjalan dalam konteks kontainer Docker. Hal ini memungkinkan Anda untuk dengan mudah menentukan dependensi dalam gambar Docker tanpa perlu menginstal perpustakaan kustom di klaster Amazon EMR Anda. Untuk informasi selengkapnya, lihat [Konfigurasi integrasi Docker](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-plan-docker.html) dan [Jalankan aplikasi Spark dengan Docker menggunakan Amazon EMR 6.0.0](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-spark-docker.html).
+ Hive LLAP Support - Hive sekarang mendukung modus eksekusi LLAP untuk meningkatkan performa kueri. Untuk informasi selengkapnya, lihat [Menggunakan Hive LLAP](https://docs.aws.amazon.com/emr/latest/ReleaseGuide/emr-hive-llap.html).

**Perubahan, penyempurnaan, dan masalah yang diselesaikan**
+ Ini adalah rilis untuk memperbaiki masalah dengan Amazon EMR Scaling ketika gagal up/scale menurunkan skala cluster dengan sukses atau menyebabkan kegagalan aplikasi.
+ Memperbaiki masalah saat permintaan penskalaan gagal untuk klaster besar yang sangat dimanfaatkan saat daemon on-cluster Amazon EMR menjalankan aktivitas pemeriksaan kesehatan, seperti mengumpulkan status node YARN dan status node HDFS. Ini terjadi karena daemon on-cluster tidak dapat mengkomunikasikan data status kesehatan node ke komponen EMR Amazon internal.
+ Peningkatan daemon EMR on-cluster untuk melacak status node dengan benar saat alamat IP digunakan kembali untuk meningkatkan keandalan selama operasi penskalaan.
+ [SPARK-29683](https://issues.apache.org/jira/browse/SPARK-29683). Memperbaiki masalah di mana kegagalan pekerjaan terjadi selama penskalaan klaster karena Spark mengasumsikan semua node yang tersedia tidak terdaftar.
+ [BENANG 9011.](https://issues.apache.org/jira/browse/YARN-9011) Memperbaiki masalah di mana kegagalan pekerjaan terjadi karena kondisi balapan dalam penonaktifan YARN saat cluster mencoba menaikkan atau menurunkan skala.
+ Memperbaiki masalah dengan kegagalan langkah atau pekerjaan selama penskalaan klaster dengan memastikan bahwa status node selalu konsisten antara daemon on-cluster EMR Amazon dan YARN/HDFS.
+ Memperbaiki masalah saat operasi klaster seperti pengurangan skala dan pengiriman langkah gagal untuk kluster EMR Amazon yang diaktifkan dengan autentikasi Kerberos. Ini karena daemon on-cluster EMR Amazon tidak memperbarui tiket Kerberos, yang diperlukan untuk berkomunikasi dengan aman dengan berjalan di node utama. HDFS/YARN 
+ Rilis Amazon EMR yang lebih baru memperbaiki masalah dengan batas “Max open files” yang lebih rendah pada yang lebih lama AL2 di Amazon EMR. Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru sekarang menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi.
+ Amazon Linux
  + Amazon Linux 2 adalah sistem operasi untuk seri rilis EMR 6.x.
  + `systemd` digunakan untuk pengelolaan layanan bukan `upstart` yang digunakan dalam Amazon Linux 1.
+ Java Development Kit (JDK)
  + Corretto JDK 8 adalah JDK default untuk seri rilis EMR 6.x.
+ Scala
  + Scala 2.12 digunakan dengan Apache Spark dan Apache Livy.
+ Python 3
  + Python 3 sekarang adalah versi default Python di EMR.
+ Label simpul YARN
  + Dimulai dengan Amazon EMR seri rilis 6.x, fitur label simpul YARN dinonaktifkan secara default. Proses utama aplikasi dapat berjalan pada kedua inti dan tugas simpul secara default. Anda dapat mengaktifkan fitur label simpul YARN dengan mengkonfigurasi properti berikut: `yarn.node-labels.enabled` dan `yarn.node-labels.am.default-node-label-expression`. Untuk informasi selengkapnya, lihat [Memahami Node Primer, Inti, dan Tugas](https://docs.aws.amazon.com/emr/latest/ManagementGuide/emr-master-core-task-nodes.html).

**Masalah yang diketahui**
+ **Turunkan batas “Maks open files” pada yang lebih lama AL2 [diperbaiki dalam rilis yang lebih baru].** Rilis Amazon EMR: emr-5.30.x, emr-5.31.0, emr-5.32.0, emr-6.0.0, emr-6.1.0, dan emr-6.2.0 didasarkan pada versi lama dari Amazon Linux 2 (), yang memiliki pengaturan ulimit yang lebih rendah untuk “File terbuka maksimum” ketika kluster Amazon EMR dibuat dengan AMI default. AL2 Amazon EMR merilis 5.30.1, 5.30.2, 5.31.1, 5.32.1, 6.0.1, 6.1.1, 6.2.1, 5.33.0, 6.3.0 dan yang lebih baru menyertakan perbaikan permanen dengan pengaturan “Max open files” yang lebih tinggi. Rilis dengan batas file terbuka yang lebih rendah menyebabkan kesalahan “Terlalu banyak file terbuka” saat mengirimkan pekerjaan Spark. Dalam rilis yang terkena dampak, AMI default Amazon EMR memiliki pengaturan ulimit default 4096 untuk “File terbuka maksimum,” yang lebih rendah dari batas file 65536 di AMI Amazon Linux 2 terbaruAmazon. Pengaturan ulimit yang lebih rendah untuk "Maksimal file terbuka" menyebabkan kegagalan tugas Spark ketika driver dan pelaksana mencoba untuk membuka lebih dari 4096 file. Untuk memperbaiki masalah, Amazon EMR memiliki skrip tindakan bootstrap (BA) yang menyesuaikan pengaturan ulimit saat pembuatan klaster. 

  Jika Anda menggunakan versi EMR Amazon yang lebih lama yang tidak memiliki perbaikan permanen untuk masalah ini, solusi berikut memungkinkan Anda untuk secara eksplisit mengatur ulimit pengontrol instans ke maksimum 65536 file.

**Mengatur secara eksplisit ulimit dari baris perintah**

  1. Edit `/etc/systemd/system/instance-controller.service` untuk menambahkan parameter berikut ke bagian Layanan.

     `LimitNOFILE=65536`

     `LimitNPROC=65536`

  1. Mulai ulang InstanceController

     `$ sudo systemctl daemon-reload`

     `$ sudo systemctl restart instance-controller`

  **Tetapkan ulimit menggunakan tindakan bootstrap (BA)**

  Anda juga dapat menggunakan skrip tindakan bootstrap (BA) untuk mengkonfigurasi ulimit instans-pengendali menjadi 65536 file saat pembuatan klaster.

  ```
  #!/bin/bash
  for user in hadoop spark hive; do
  sudo tee /etc/security/limits.d/$user.conf << EOF
  $user - nofile 65536
  $user - nproc 65536
  EOF
  done
  for proc in instancecontroller logpusher; do
  sudo mkdir -p /etc/systemd/system/$proc.service.d/
  sudo tee /etc/systemd/system/$proc.service.d/override.conf << EOF
  [Service]
  LimitNOFILE=65536
  LimitNPROC=65536
  EOF
  pid=$(pgrep -f aws157.$proc.Main)
  sudo prlimit --pid $pid --nofile=65535:65535 --nproc=65535:65535
  done
  sudo systemctl daemon-reload
  ```
+ Spark interaktif shell, termasuk PySpark, SparkR, dan spark-shell, tidak mendukung penggunaan Docker dengan pustaka tambahan.
+ Untuk menggunakan Python 3 dengan Amazon EMR versi 6.0.0, Anda harus menambahkan `PATH` ke `yarn.nodemanager.env-whitelist`.
+ Fungsionalitas Live Long and Process (LLAP) tidak didukung saat Anda menggunakan Katalog Data AWS Glue sebagai metastore untuk Hive.
+ Bila menggunakan Amazon EMR 6.0.0 dengan integrasi Spark dan Docker, Anda harus mengkonfigurasi instans di klaster Anda dengan tipe instans yang sama dan jumlah volume EBS yang sama untuk menghindari gagal ketika mengirimkan tugas Spark dengan waktu aktif Docker.
+ [Di Amazon EMR 6.0.0, pada mode penyimpanan Amazon HBase S3 dipengaruhi oleh masalah HBASE-24286.](https://issues.apache.org/jira/browse/HBASE-24286) HBase master tidak dapat menginisialisasi saat cluster dibuat menggunakan data S3 yang ada.
+ Masalah yang diketahui dalam cluster dengan beberapa node primer dan otentikasi Kerberos

  Jika Anda menjalankan cluster dengan beberapa node utama dan otentikasi Kerberos di Amazon EMR rilis 5.20.0 dan yang lebih baru, Anda mungkin mengalami masalah dengan operasi klaster seperti penurunan skala atau pengiriman langkah, setelah klaster berjalan selama beberapa waktu. Periode waktunya tergantung pada masa validitas tiket Kerberos yang Anda tetapkan. Masalah menurunkan skala akan berdampak pada permintaan menurunkan skala otomatis dan permintaan menurunkan skala eksplisit yang Anda kirimkan. Operasi klaster tambahan juga dapat terkena dampak. 

  Pemecahan masalah:
  + SSH sebagai `hadoop` pengguna ke node utama utama dari cluster EMR dengan beberapa node primer.
  +  Jalankan perintah berikut untuk memperbarui tiket Kerberos untuk pengguna `hadoop`. 

    ```
    kinit -kt <keytab_file> <principal>
    ```

    Biasanya, fail keytab terletak di `/etc/hadoop.keytab` dan file utama-nya dalam bentuk `hadoop/<hostname>@<REALM>`.
**catatan**  
Pemecahan masalah ini akan efektif untuk jangka waktu selama tiket Kerberos berlaku. Durasi ini adalah 10 jam secara default, tetapi dapat dikonfigurasi dengan pengaturan Kerberos Anda. Anda harus menjalankan kembali perintah di atas setelah tiket Kerberos berakhir.

## versi komponen 6.0.0
<a name="emr-600-components"></a>

Komponen yang diinstal oleh Amazon EMR dengan rilis ini tercantum di bawah ini. Beberapa komponen diinstal sebagai bagian dari paket aplikasi big data. Sedangkan komponen lainnya bersifak unik untuk Amazon EMR dan diinstal untuk proses sistem dan fitur. Ini biasanya dimulai dengan `emr` atau `aws`. Paket aplikasi big data dalam rilis Amazon EMR terbaru biasanya versi terbaru yang ditemukan di komunitas. Kami menyediakan rilis komunitas di Amazon EMR secepat mungkin.

Beberapa komponen yang ada di Amazon EMR berbeda dari versi komunitas. Komponen ini mempunyai label versi dalam bentuk `CommunityVersion-amzn-EmrVersion`. `EmrVersion` dimulai dari 0. Misalnya, jika komponen komunitas open source bernama `myapp-component` dengan versi 2.2 telah dimodifikasi tiga kali untuk dimasukkan dalam rilis EMR Amazon yang berbeda, versi rilisnya terdaftar sebagai. `2.2-amzn-2`


| Komponen | Versi | Deskripsi | 
| --- | --- | --- | 
| aws-sagemaker-spark-sdk | 1.2.6 | Amazon SageMaker Spark SDK | 
| emr-ddb | 4.14.0 | Konektor Amazon DynamoDB untuk aplikasi ekosistem Hadoop. | 
| emr-goodies | 3.0.0 | Perpustakaan kenyamanan ekstra untuk ekosistem Hadoop. | 
| emr-kinesis | 3.5.0 | Konektor Amazon Kinesis untuk aplikasi ekosistem Hadoop. | 
| emr-s3-dist-cp | 2.14.0 | Aplikasi salinan terdistribusi yang dioptimalkan untuk Amazon S3. | 
| emr-s3-select | 1.5.0 | EMR S3Select Connector | 
| emrfs | 2.39.0 | Konektor Amazon S3 untuk aplikasi ekosistem Hadoop. | 
| ganglia-monitor | 3.7.2 | Agen Ganglia tertanam untuk aplikasi ekosistem Hadoop bersama dengan agen pemantauan Ganglia. | 
| ganglia-metadata-collector | 3.7.2 | Kolektor metadata Ganglia untuk menggabungkan metrik dari agen pemantauan Ganglia. | 
| ganglia-web | 3.7.1 | Aplikasi web untuk melihat metrik yang dikumpulkan oleh kolektor metadata Ganglia. | 
| hadoop-client | 3.2.1-amzn-0 | Klien baris perintah Hadoop seperti 'hdfs', 'Hadoop', atau 'yarn'. | 
| hadoop-hdfs-datanode | 3.2.1-amzn-0 | Layanan tingkat simpul HDFS untuk menyimpan blok. | 
| hadoop-hdfs-library | 3.2.1-amzn-0 | Klien dan perpustakaan baris perintah HDFS | 
| hadoop-hdfs-namenode | 3.2.1-amzn-0 | Layanan HDFS untuk melacak nama file dan lokasi blok. | 
| hadoop-hdfs-journalnode | 3.2.1-amzn-0 | Layanan HDFS untuk mengelola jurnal filesystem Hadoop pada klaster HA. | 
| hadoop-httpfs-server | 3.2.1-amzn-0 | Titik akhir HTTP untuk operasi HDFS. | 
| hadoop-kms-server | 3.2.1-amzn-0 | Server manajemen kunci kriptografi berdasarkan API Hadoop. KeyProvider  | 
| hadoop-mapred | 3.2.1-amzn-0 | MapReduce pustaka mesin eksekusi untuk menjalankan MapReduce aplikasi. | 
| hadoop-yarn-nodemanager | 3.2.1-amzn-0 | Layanan YARN untuk mengelola kontainer pada simpul individu. | 
| hadoop-yarn-resourcemanager | 3.2.1-amzn-0 | Layanan YARN untuk mengalokasikan dan mengelola sumber daya klaster dan aplikasi terdistribusi. | 
| hadoop-yarn-timeline-server | 3.2.1-amzn-0 | Layanan untuk mengambil informasi terkini dan historis untuk aplikasi YARN. | 
| hbase-hmaster | 2.2.3 | Layanan untuk HBase cluster yang bertanggung jawab untuk koordinasi Daerah dan pelaksanaan perintah administratif. | 
| hbase-region-server | 2.2.3 | Layanan untuk melayani satu atau lebih HBase wilayah. | 
| hbase-client | 2.2.3 | HBase klien baris perintah. | 
| hbase-rest-server | 2.2.3 | Layanan menyediakan titik akhir RESTful HTTP untuk HBase. | 
| hbase-thrift-server | 2.2.3 | Layanan menyediakan titik akhir Thrift ke. HBase | 
| hcatalog-client | 3.1.2-amzn-0 | Klien baris perintah 'hcat' untuk memanipulasi hcatalog-server. | 
| hcatalog-server | 3.1.2-amzn-0 | Penyediaan layanan HCatalog, tabel dan lapisan manajemen penyimpanan untuk aplikasi terdistribusi. | 
| hcatalog-webhcat-server | 3.1.2-amzn-0 | Titik akhir HTTP menyediakan antarmuka REST ke HCatalog. | 
| hive-client | 3.1.2-amzn-0 | Klien baris perintah Hive. | 
| hive-hbase | 3.1.2-amzn-0 | Klien Hive-hbase. | 
| hive-metastore-server | 3.1.2-amzn-0 | Layanan untuk mengakses metastore Hive, repositori semantik yang menyimpan metadata untuk SQL pada operasi Hadoop. | 
| hive-server2 | 3.1.2-amzn-0 | Layanan untuk menerima kueri Hive sebagai permintaan web. | 
| hudi | 0.5.0-incubating-amzn-1 | Kerangka kerja pemrosesan tambahan untuk menyalakan alur data pada latensi rendah dan efisiensi tinggi. | 
| hudi-presto | 0.5.0-incubating-amzn-1 | Perpustakaan paket untuk menjalankan Presto dengan Hudi. | 
| hue-server | 4.4.0 | Aplikasi web untuk menganalisis data menggunakan aplikasi ekosistem Hadoop | 
| jupyterhub | 1.0.0 | Server multi-pengguna untuk notebook Jupyter | 
| livy-server | 0.6.0-incubating | Antarmuka REST untuk berinteraksi dengan Apache Spark | 
| nginx | 1.12.1 | nginx [engine x] adalah server HTTP dan server proksi balik | 
| mxnet | 1.5.1 | Perpustakaan yang fleksibel, dapat diskalakan, dan efisien untuk deep learning. | 
| mariadb-server | 5.5.64\$1 | Server basis data MariaDB. | 
| nvidia-cuda | 9.2.88 | Driver Nvidia dan kit alat Cuda | 
| oozie-client | 5.1.0 | Klien baris perintah Oozie. | 
| oozie-server | 5.1.0 | Layanan untuk menerima permintaan alur kerja Oozie. | 
| opencv | 3.4.0 | Perpustakaan Visi Komputer Sumber Terbuka. | 
| phoenix-library | 5.0.0- -2.0 HBase | Perpustakaan phoenix untuk server dan klien | 
| phoenix-query-server | 5.0.0- -2.0 HBase | Sebuah server ringan yang menyediakan akses JDBC serta Protocol Buffers dan akses format JSON ke API Avatica  | 
| presto-coordinator | 0,230 | Layanan untuk menerima kueri dan mengelola eksekusi kueri antara presto-worker. | 
| presto-worker | 0,230 | Layanan untuk mengeksekusi potongan kueri. | 
| presto-client | 0,230 | Klien baris perintah Presto yang diinstal pada master klaster HA yang siaga di mana server Presto server tidak dimulai. | 
| r | 3.4.3 | Proyek R untuk Komputasi Statistik | 
| spark-client | 2.4.4 | Klien baris perintah Spark. | 
| spark-history-server | 2.4.4 | Web UI untuk melihat log acara untuk seluruh masa pakai aplikasi Spark. | 
| spark-on-yarn | 2.4.4 | Mesin eksekusi dalam memori untuk YARN. | 
| spark-yarn-slave | 2.4.4 | Perpustakaan Apache Spark yang dibutuhkan oleh slave YARN. | 
| tensorflow | 1.14.0 | TensorFlow pustaka perangkat lunak open source untuk perhitungan numerik kinerja tinggi. | 
| tez-on-yarn | 0.9.2 | Aplikasi dan perpustakaan tez YARN. | 
| webserver | 2.4.41\$1 | Server HTTP Apache. | 
| zeppelin-server | 0.9.0-SNAPSHOT | Notebook berbasis web yang memungkinkan analisis data interaktif. | 
| zookeeper-server | 3.4.14 | Layanan terpusat untuk menjaga informasi konfigurasi, penamaan, yang menyediakan sinkronisasi terdistribusi, dan menyediakan layanan grup. | 
| zookeeper-client | 3.4.14 | ZooKeeper klien baris perintah. | 

## klasifikasi konfigurasi 6.0.0
<a name="emr-600-class"></a>

Klasifikasi konfigurasi memungkinkan Anda menyesuaikan aplikasi. Ini sering kali bersesuaian dengan file XML konfigurasi untuk aplikasi, seperti `hive-site.xml`. Untuk informasi selengkapnya, lihat [Konfigurasikan aplikasi](emr-configure-apps.md).


**klasifikasi emr-6.0.0**  

| Klasifikasi | Deskripsi | 
| --- | --- | 
| capacity-scheduler | Ubah nilai dalam file capacity-scheduler.xml Hadoop. | 
| container-executor | Ubah nilai dalam file container-executor.cfg Hadoop YARN ini. | 
| container-log4j | Ubah nilai dalam file container-log4j.properties Hadoop YARN. | 
| core-site | Ubah nilai dalam file core-site.xml Hadoop. | 
| emrfs-site | Ubah pengaturan EMRFS. | 
| hadoop-env | Ubah nilai dalam lingkungan Hadoop untuk semua komponen Hadoop. | 
| hadoop-log4j | Ubah nilai dalam file log4j.properties Hadoop ini. | 
| hadoop-ssl-server | Ubah konfigurasi server ssl hadoop | 
| hadoop-ssl-client | Ubah konfigurasi klien ssl hadoop | 
| hbase | Pengaturan Amazon EMR-curated untuk Apache. HBase | 
| hbase-env | Ubah nilai HBase di lingkungan. | 
| hbase-log4j | Ubah nilai dalam file HBase hbase-log4j.properties. | 
| hbase-metrics | Ubah nilai dalam file HBase hadoop-metrics2-hbase.properties. | 
| hbase-policy | Ubah nilai dalam HBase file hbase-policy.xml. | 
| hbase-site | Ubah nilai dalam HBase file hbase-site.xml. | 
| hdfs-encryption-zones | Konfigurasikan zona enkripsi HDFS. | 
| hdfs-env | Ubah nilai dalam lingkungan HDFS. | 
| hdfs-site | Ubah nilai dalam hdfs-site.xml HDFS. | 
| hcatalog-env | Ubah nilai HCatalog di lingkungan. | 
| hcatalog-server-jndi | Ubah nilai di HCatalog jndi.properties. | 
| hcatalog-server-proto-hive-site | Ubah nilai HCatalog proto-hive-site dalam.xml's. | 
| hcatalog-webhcat-env | Ubah nilai di lingkungan HCatalog WebHCat. | 
| hcatalog-webhcat-log4j2 | Ubah nilai di HCat log4j2.properties HCatalog Web. | 
| hcatalog-webhcat-site | Ubah nilai dalam file webhcat-site.xml HCatalog WebHCat. | 
| hive | Pengaturan dikurasi Amazon EMR untuk Apache Hive. | 
| hive-beeline-log4j2 | Ubah nilai dalam file beeline-log4j2.properties Hive. | 
| hive-parquet-logging | Ubah nilai dalam file parquet-logging.properties Hive. | 
| hive-env | Ubah nilai dalam lingkungan Hive. | 
| hive-exec-log4j2 | Ubah nilai dalam file hive-exec-log 4j2.properties Hive. | 
| hive-llap-daemon-log4j2 | Ubah nilai dalam file llap-daemon-log 4j2.properties Hive. | 
| hive-log4j2 | Ubah nilai dalam file hive-log4j2.properties Hive. | 
| hive-site | Ubah nilai dalam file hive-site.xml Hive | 
| hiveserver2-site | Ubah nilai dalam file hiveserver2-site.xml Hive Server2 | 
| hue-ini | Ubah nilai dalam file ini Hue | 
| httpfs-env | Ubah nilai di lingkungan HTTPFS. | 
| httpfs-site | Ubah nilai dalam file httpfs-site.xml Hadoop. | 
| hadoop-kms-acls | Ubah nilai dalam file kms-acls.xml Hadoop. | 
| hadoop-kms-env | Ubah nilai dalam lingkungan Hadoop KMS. | 
| hadoop-kms-log4j | Ubah nilai dalam file kms-log4j.properties Hadoop. | 
| hadoop-kms-site | Ubah nilai dalam file kms-site.xml Hadoop. | 
| jupyter-notebook-conf | Ubah nilai dalam file jupyter\$1notebook\$1config.py Jupyter Notebook. | 
| jupyter-hub-conf | Ubah nilai dalam JupyterHubs file jupyterhub\$1config.py. | 
| jupyter-s3-conf | Konfigurasikan persistensi Jupyter Notebook S3. | 
| jupyter-sparkmagic-conf | Ubah nilai dalam file config.json Sparkmagic. | 
| livy-conf | Ubah nilai dalam file livy.conf Livy. | 
| livy-env | Ubah nilai di lingkungan Livy. | 
| livy-log4j | Ubah pengaturan Livy log4j.properties. | 
| mapred-env | Ubah nilai di lingkungan MapReduce aplikasi. | 
| mapred-site | Ubah nilai dalam file mapred-site.xml MapReduce aplikasi. | 
| oozie-env | Ubah nilai di lingkungan Oozie. | 
| oozie-log4j | Ubah nilai dalam file oozie-log4j.properties Oozie. | 
| oozie-site | Ubah nilai dalam file oozie-site.xml Oozie. | 
| phoenix-hbase-metrics | Ubah nilai dalam file hadoop-metrics2-hbase.properties Phoenix. | 
| phoenix-hbase-site | Ubah nilai dalam file hbase-site.xml Phoenix. | 
| phoenix-log4j | Ubah nilai dalam file log4j.properties Phoenix. | 
| phoenix-metrics | Ubah nilai dalam file hadoop-metrics2-phoenix.properties Phoenix. | 
| presto-log | Ubah nilai dalam file log.properties Presto. | 
| presto-config | Ubah nilai dalam file config.properties Presto. | 
| presto-password-authenticator | Ubah nilai dalam file password-authenticator.properties Presto. | 
| presto-env | Ubah nilai dalam file presto-env.sh Presto. | 
| presto-node | Ubah nilai dalam file node.properties Presto. | 
| presto-connector-blackhole | Ubah nilai dalam file blackhole.properties Presto. | 
| presto-connector-cassandra | Ubah nilai dalam file cassandra.properties Presto. | 
| presto-connector-hive | Ubah nilai dalam file hive.properties Presto. | 
| presto-connector-jmx | Ubah nilai dalam file jmx.properties Presto. | 
| presto-connector-kafka | Ubah nilai dalam file kafka.properties Presto. | 
| presto-connector-localfile | Ubah nilai dalam file localfile.properties Presto. | 
| presto-connector-memory | Ubah nilai dalam file memory.properties Presto. | 
| presto-connector-mongodb | Ubah nilai dalam file mongodb.properties Presto. | 
| presto-connector-mysql | Ubah nilai dalam file mysql.properties Presto. | 
| presto-connector-postgresql | Ubah nilai dalam file postgresql.properties Presto. | 
| presto-connector-raptor | Ubah nilai dalam file raptor.properties Presto. | 
| presto-connector-redis | Ubah nilai dalam file redis.properties Presto. | 
| presto-connector-redshift | Ubah nilai dalam file redshift.properties Presto. | 
| presto-connector-tpch | Ubah nilai dalam file tpch.properties Presto. | 
| presto-connector-tpcds | Ubah nilai dalam file tpcds.properties Presto. | 
| ranger-kms-dbks-site | Ubah nilai dalam file dbks-site.xml Ranger KMS. | 
| ranger-kms-site | Ubah nilai dalam ranger-kms-site file.xml. dari Ranger KMS. | 
| ranger-kms-env | Ubah nilai di lingkungan Ranger KMS. | 
| ranger-kms-log4j | Ubah nilai dalam file kms-log4j.properties Ranger KMS. | 
| ranger-kms-db-ca | Ubah nilai untuk file CA pada S3 untuk koneksi MySQL SSL dengan Ranger KMS. | 
| recordserver-env | Ubah nilai di lingkungan EMR RecordServer . | 
| recordserver-conf | Ubah nilai dalam file erver.properties EMR RecordServer. | 
| recordserver-log4j | Ubah nilai dalam file log4j.properties EMR RecordServer. | 
| spark | Pengaturan terkurasi Amazon EMR untuk Apache Spark. | 
| spark-defaults | Ubah nilai dalam file spark-defaults.conf Spark. | 
| spark-env | Ubah nilai di lingkungan Spark. | 
| spark-hive-site | Ubah nilai dalam file hive-site.xml Spark | 
| spark-log4j | Ubah nilai dalam file log4j.properties Spark. | 
| spark-metrics | Ubah nilai dalam file metrics.properties Spark. | 
| tez-site | Ubah nilai dalam file tez-site.xml Tez. | 
| yarn-env | Ubah nilai di lingkungan YARN. | 
| yarn-site | Ubah nilai dalam file yarn-site.xml YARN. | 
| zeppelin-env | Ubah nilai di lingkungan Zeppelin. | 
| zookeeper-config | Ubah nilai dalam ZooKeeper file zoo.cfg. | 
| zookeeper-log4j | Ubah nilai dalam file ZooKeeper log4j.properties. |