스파크를 사용중 다음과 같은 에러가 발생
org.apache.spark.deploy.master.Master running as process 580. Stop it first.
이미 스파크 마스터가 실행되고 있어서, 만약 다시 실행시키려면 저 프로세스를 죽이고 다시 실행해야한다.
프로세스를 확인해보자
ps -ef
실제로 580 에서 실행중이고 해당 프로세스를 죽이고 다시 실행시켜보자
kill 580
ps -ef
/home/spark/sbin/start-master.sh
다시 정상적으로 실행되는 것을 확인할 수 있다
'Data Engineering > Spark' 카테고리의 다른 글
| [Spark] spark-shell, spark-submit 실행시 --num-executors 에 대한 확인 (0) | 2022.04.13 |
|---|---|
| [Spark] Spark Cluster 간단하게 만들어보기 (standalone) (0) | 2022.04.13 |
| [Spark] 스파크 마스터 최초 실행시 얻을 수 있는 로그 내용 (0) | 2022.04.13 |
| [Spark] ./spark/sbin/start-worker.sh 실행 옵션 확인하는 방법 (0) | 2022.04.13 |
| [Spark] ./spark/sbin/start-master.sh 실행 옵션 확인 (0) | 2022.04.13 |
