Page 10 -

11.6 아마존 EC2에서 스파크 실행 464
11.6.1 사전 준비 464
11.6.2 EC2 기반 스파크 자체 클러스터 생성 467
11.6.3 EC2 클러스터 사용 471
11.6.4 클러스터 제거 475
11.7 요약 476

12장 YARN 클러스터와 메소스 클러스터 477

12.1 YARN에서 스파크 실행 478
12.1.1 YARN 아키텍처 479
12.1.2 YARN 설치, 구성 및 시작 481
12.1.3 YARN의 리소스 스케줄링 482
12.1.4 YARN에 스파크 애플리케이션 제출 484
12.1.5 YARN에서 스파크 설정 486
12.1.6 스파크 잡에 할당할 리소스 설정 489
12.1.7 YARN UI 491
12.1.8 YARN에서 로그 조회 493
12.1.9 보안 관련 사항 495
12.1.10 동적 리소스 할당 495
12.2 메소스에서 스파크 실행 498
12.2.1 메소스 아키텍처 499
12.2.2 메소스 설치 및 설정 503
12.2.3 메소스 웹 UI 505
12.2.4 메소스의 리소스 스케줄링 507
12.2.5 메소스에 스파크 애플리케이션 제출 509
12.2.6 도커로 스파크 실행 511
12.3 요약 517

spark_08.indd 24 2018-05-08 오후 6:26:10