View a markdown version of this page

AWS runtime for Apache Spark (emr-spark-8.0.0) - Amazon EMR

기계 번역으로 제공되는 번역입니다. 제공된 번역과 원본 영어의 내용이 상충하는 경우에는 영어 버전이 우선합니다.

AWS runtime for Apache Spark (emr-spark-8.0.0)

다음 표에는 AWS runtime for Apache Spark (emr-spark-8.0.0)에서 사용할 수 있는 애플리케이션 버전이 나열되어 있습니다.

애플리케이션 버전 정보
애플리케이션 버전
Spark 4.0.2-amzn-0
Iceberg 1.10.1-amzn-0
델타 4.0.0-amzn-1-spark
Hudi 1.1.0-amzn-0
AWS runtime for Apache Spark (emr-spark-8.0.0) 릴리스 정보
  • GA 릴리스 - Apache Spark 4.0.2가 AWS runtime for Apache Spark 탑재된의 정식 출시 릴리스입니다. 이 릴리스는 EMR Serverless, EMR on EC2 및 EMR on EKS에서 사용할 수 있습니다.

  • 리전 가용성 - 중동(바레인) 및 중동(UAE) AWS 리전을 제외하고 EMR Serverless를 사용할 수 있는 모든 리전에서 사용할 수 있습니다.

  • 알려진 제한 사항 - 기본 FGAC 지원이 포함된 Spark Connect 보안 엔드포인트는이 릴리스에서 사용할 수 없습니다.

  • 추가 설명서 - 추가 Apache Spark 설명서는 Apache Spark 4.0.2 릴리스 설명서를 참조하세요.

시작하기

Apache Spark 4.0.2를 시작하려면 AWS CLI를 사용하여 EMR Serverless 애플리케이션을 생성합니다.

aws emr-serverless create-application --type SPARK \ --release-label emr-spark-8.0.0 \ --name spark4-serverless \ --region us-east-1
참고
  • 이 릴리스는 미리 보기 릴리스(emr-spark-8.0-preview)를 대체합니다. 미리 보기는 Spark 4.0.1로 제한되었으며 FGAC, Hudi, 데이터 커넥터 및 영구 Spark 기록 서버가 부족했습니다.

  • --type 파라미터create-applicationSPARK(대문자).