봉식이와 캔따개

[error] Only one SparkContext may be running in this JVM 본문

~2022 흔적들/Spark

[error] Only one SparkContext may be running in this JVM

봉식이누나 2020. 2. 11. 10:47

 

 

 

Only one SparkContext may be running in this JVM (see SPARK-2243).
To ignore this error, set spark.driver.allowMultipleContexts = true

 

 

 

 

 

이러한 에러가 났을 때 해결방법.

 

여러개의 spark context를 사용 가능하게 설정해주면 된다.

 

 

 

 

SparkConf conf = new SparkConf().setAppName("sample").set("spark.driver.allowMultipleContexts", "true");

 

 

 

 

반응형

'~2022 흔적들 > Spark' 카테고리의 다른 글

Spark Streaming으로 Kafka Topic 값 받아오기  (0) 2020.02.05
'~2022 흔적들/Spark' Related Articles more
Comments