Page 9 -

10.3.4 프로그램 코드로 환경 설정 429
10.3.5 master 매개변수 429
10.3.6 설정된 매개변수 조회 430
10.4 스파크 웹 UI 431
10.4.1 Jobs 페이지 431
10.4.2 Stages 페이지 433
10.4.3 Storage 페이지 435
10.4.4 Environment 페이지 436
10.4.5 Executors 페이지 436
10.5 로컬 머신에서 스파크 실행 437
10.5.1 로컬 모드 437
10.5.2 로컬 클러스터 모드 439
10.6 요약 440

11장 스파크 자체 클러스터 441

11.1 스파크 자체 클러스터의 컴포넌트 442
11.2 스파크 자체 클러스터 시작 445
11.2.1 셸 스크립트로 클러스터 시작 446
11.2.2 수동으로 클러스터 시작 450
11.2.3 스파크 프로세스 조회 451
11.2.4 마스터 고가용성 및 복구 기능 451
11.3 스파크 자체 클러스터의 웹 UI 454
11.4 스파크 자체 클러스터에서 애플리케이션 실행 456
11.4.1 드라이버의 위치 456
11.4.2 실행자 개수 지정 458
11.4.3 추가 클래스패스 항목 및 파일 지정 459
11.4.4 애플리케이션 강제 종료 461
11.4.5 애플리케이션 자동 재시작 461
11.5 스파크 히스토리 서버와 이벤트 로깅 462

spark_08.indd 23 2018-05-08 오후 6:26:09