[Spark Ch-06] Spark Connect와 pandas API on Spark: 클라이언트는 계획만 보내고 pandas 코드는 분산으로 돈다
Databricks Spark 자격증 6영역(Spark Connect, 5%)과 7영역(pandas API on Spark, 5%)을 시험 안내서 항목 순서대로 정리합니다. Spark Connect의 구조와 쓸 수 없는 API, 배포 모드와 master URL, pandas API on Spark의 기본 인덱스와 변환 비용, pandas UDF와 pandas Function API, Arrow 설정을 Spark 4.2.0 공식 문서 기준으로 확인하고 3.5와 달라진 기본값을 표시합니다.