Spark cluster mode: 요청·Pod 배치·task 조율

Spark cluster mode: 요청·Pod 배치·task 조율 An architecture diagram generated by Archify. spark-submit · 로컬 클라이언트 · Architecture component spark-submit 로컬 클라이언트 Kubernetes API Server · 인증 · admission · API 상태 · EKS 클러스터 Kubernetes API Server 인증 · admission · API 상태 Driver Pod · Spark stage/task 조율 · EKS 클러스터 Driver Pod Spark stage/task 조율 Executor Pod 1 · task 실행 · EKS 클러스터 Executor Pod 1 task 실행 Executor Pod 2 · task 실행 · EKS 클러스터 Executor Pod 2 task 실행 Executor Pod 3 · task 실행 · EKS 클러스터 Executor Pod 3 task 실행 Pod 배치와 시작 · scheduler + node kubelets · EKS 클러스터 Pod 배치와 시작 scheduler + node kubelets 드라이버 Pod 생성 요청 배치 · 시작 Executor Pod 요청 배치 · 시작 등록 · 상태 보고 Pod specs / bindings EKS 클러스터