1순위 : 코드상 설정값
2순위 : spark-shell, spark-submit 실행시 파라미터로 넣는 설정값
3순위 : spark-defaults.conf 의 설정값
'Data Engineering > Spark' 카테고리의 다른 글
[Spark] 스파크 스탠드얼론 워커 갯수 설정하는 방법 (stand-alone) (0) | 2022.03.30 |
---|---|
[Hadoop] 하둡 core-site.xml 설정파일 확인하기 (0) | 2022.03.25 |
[Zookeeper] 주키퍼 설정파일 zoo.cfg 정리 (0) | 2022.03.25 |
[Spark] Spark on Yarn Cluster 어플리케이션 실행 전후 각 서버별 jps 상태 확인하기 (0) | 2022.03.20 |
[Spark] Spark on Yarn Cluster 실행시 각 컨테이너별 jps 상태 확인하기 (0) | 2022.03.20 |