Pertimbangan dan batasan - Amazon Athena
Apache Spark versi 3.5Mesin Pyspark versi 3

Terjemahan disediakan oleh mesin penerjemah. Jika konten terjemahan yang diberikan bertentangan dengan versi bahasa Inggris aslinya, utamakan versi bahasa Inggris.

Pertimbangan dan batasan

Apache Spark versi 3.5

Berikut ini adalah pertimbangan dan batasan untuk versi rilis Apache Spark versi 3.5:

  • Versi rilis ini tersedia sebagai berikut Wilayah AWS:

    • Asia Pasifik (Mumbai)

    • Asia Pasifik (Seoul)

    • Asia Pasifik (Singapura)

    • Asia Pasifik (Sydney)

    • Asia Pasifik (Tokyo)

    • Kanada (Pusat)

    • Eropa (Frankfurt)

    • Eropa (Irlandia)

    • Eropa (London)

    • Eropa (Paris)

    • Eropa (Stockholm)

    • Amerika Selatan (Sao Paulo)

    • AS Timur (Virginia Utara)

    • AS Timur (Ohio)

    • AS Barat (Oregon)

  • Versi mesin ini tidak mendukung notebook atau notebook dalam konsol Athena. APIs Sebagai gantinya, versi ini terintegrasi dengan notebook Amazon SageMaker AI Unified Studio. Anda juga dapat menggunakan klien Spark Connect yang kompatibel.

  • Perhitungan APIs -StartCalculationExecution, ListCalculationExecutions danGetCalculationExecution, tidak didukung dalam rilis ini.

  • Anda tidak dapat meng-upgrade workgroup dari PySpark engine versi 3 ke Apache Spark versi 3.5.

Mesin Pyspark versi 3

Berikut ini adalah pertimbangan dan batasan untuk versi rilis Pyspark engine versi 3:

  • Versi rilis ini tersedia sebagai berikut Wilayah AWS:

    • Asia Pasifik (Mumbai)

    • Asia Pasifik (Singapura)

    • Asia Pasifik (Sydney)

    • Asia Pasifik (Tokyo)

    • Eropa (Frankfurt)

    • Eropa (Irlandia)

    • Timur AS (N. Virginia)

    • AS Timur (Ohio)

    • AS Barat (Oregon)

  • AWS Lake Formation tidak didukung.

  • Tabel yang menggunakan proyeksi partisi tidak didukung.

  • Workgroup yang diaktifkan Apache Spark dapat menggunakan editor notebook Athena, tetapi bukan editor kueri Athena. Hanya workgroup Athena SQL yang dapat menggunakan editor kueri Athena.

  • Kueri tampilan lintas-mesin tidak didukung. Tampilan yang dibuat oleh Athena SQL tidak dapat ditanyakan oleh Athena untuk Spark. Karena tampilan untuk kedua mesin diimplementasikan secara berbeda, mereka tidak kompatibel untuk penggunaan cross-engine.

  • MLlib (Pustaka pembelajaran mesin Apache Spark) dan pyspark.ml paket tidak didukung. Untuk daftar pustaka Python yang didukung, lihat. Daftar pustaka Python yang sudah diinstal sebelumnya

  • Saat pip install ini, tidak didukung di Athena untuk sesi Spark.

  • Hanya satu sesi aktif per buku catatan yang diizinkan.

  • Saat beberapa pengguna menggunakan konsol untuk membuka sesi yang ada di grup kerja, mereka mengakses buku catatan yang sama. Untuk menghindari kebingungan, hanya buka sesi yang Anda buat sendiri.

  • Domain hosting untuk aplikasi Apache Spark yang mungkin Anda gunakan dengan Amazon Athena (misalnya,analytics-gateway.us-east-1.amazonaws.com) terdaftar di Daftar Akhiran Publik (PSL) internet. Jika Anda perlu mengatur cookie sensitif di domain Anda, kami sarankan Anda menggunakan cookie dengan __Host- awalan untuk membantu mempertahankan domain Anda dari upaya pemalsuan permintaan lintas situs (CSRF). Untuk informasi selengkapnya, lihat halaman Set-Cookie di dokumentasi developer Mozilla.org.

  • Untuk informasi tentang pemecahan masalah buku catatan, sesi, dan kelompok kerja Spark di Athena, lihat. Memecahkan Masalah Athena untuk Spark