경고
지원 종료 공지
- Apache Spark 3.4용 Azure Synapse 런타임에 대한 지원 종료가 발표되었습니다.
- Apache Spark 3.4용 Azure Synapse Runtime은 2026년 3월 31일 더 이상 사용되지 않으며 사용하지 않도록 설정됩니다.
Azure Synapse Analytics는 Apache Spark에 다양한 런타임을 지원합니다. 이 문서에서는 Apache Spark 3.4용 Azure Synapse 런타임에 대한 런타임 구성 요소 및 버전을 설명합니다.
구성 요소 버전
| 구성 요소 | 버전 |
|---|---|
| Apache Spark | 3.4.1 |
| 운영 체제 | 마리너 2.0 |
| 자바 | 11 |
| 스칼라 | 2.12.17 |
| Delta Lake | 2.4.0 |
| 파이썬 | 3.10 |
| R 프로그래밍 언어 | 4.2.2 |
팁
최신 정보, 자세한 변경 내용 목록 및 Spark 런타임에 대한 특정 릴리스 정보는 Spark 런타임 릴리스 및 업데이트를 확인하고 구독 합니다.
라이브러리
Java/Scala용 Apache Spark 3.4용 Azure Synapse Runtime에 포함된 라이브러리를 확인하려면 Python 및 R에서 Apache Spark 3.4 릴리스 정보용 Azure Synapse Runtime으로 이동합니다.
팁
spark.memoryOverheadFactor.preferred: true로 설정하면 Spark는 spark.driver.memoryOverhead와 spark.executor.memoryOverhead가 명시적으로 정의한 값보다 spark.driver.memoryOverhead와 spark.executor.memoryOverhead를 우선시합니다. 활성화되면 오버헤드는 항상 팩터를 사용해 계산되며, 명시적인 오버헤드 설정은 무시됩니다. 기본값은 하위 호환성을 위해 false입니다.