spark-submit 을 이용해서 애플리케이션 실행
spark-submit은 드라이버 프로그램을 실행, 사용자는 main()메서드 호출
드라이버 프로그램은 클러스터 매니저에게 익스큐터 실행을 위한 리소스 요청
클러스터 매니저는 익스큐터 실행
드라이버는 단위 작업 형태로 익스큐터에게 보냄.
익스큐터는 이를 실행
끝이나면 익스큐터 중지 후 클러스터 매니저에 사용했던 자원 반환
'소프트웨어 개발 > Scala - Functional' 카테고리의 다른 글
| 스칼라로 인공신경망 맛보기 구현 (0) | 2017.11.25 |
|---|---|
| Spark 개발세팅 환경 연구 - SBT 외 스켈레톤 프로젝트 생성 및 의존성 추가 (1) | 2017.01.10 |
| Spark 멀티노드 슬레이브 활성화 및 에러노트 (0) | 2017.01.08 |
| 라즈베리파이와 똥컴으로 하둡 구성 (작업중) (0) | 2017.01.05 |
| Spark를 이용한 데이터분석 (1) - 준비하기 (0) | 2016.12.25 |