봉식이와 캔따개

Only one SparkContext may be running in this JVM (see SPARK-2243). To ignore this error, set spark.driver.allowMultipleContexts = true 이러한 에러가 났을 때 해결방법. 여러개의 spark context를 사용 가능하게 설정해주면 된다. SparkConf conf = new SparkConf().setAppName("sample").set("spark.driver.allowMultipleContexts", "true");

오늘은 Spark Streaming 으로 Kafka를 통해 집어넣은 값을 뽑아내보라는... 이야기를 듣고 진행해보았습니다. Spark도 잘 모르는데 하려니까 너무 막막해요... 2020/01/29 - [프로그래밍/Etc] - [Kafka] java로 kafka producer 작성하기 [Kafka] java로 kafka producer 작성하기 kafka 글이 벌써 세개... 카테고리를 만들어야할지 고민이 된다. 오늘은 java로 kafka producer를 작성해보겠다. 목표 : 1초에 한번 씩 랜덤한 숫자를 내보내는 producer 작성하기!! 1. project 생성하기 우선 Mav.. bong-sik.tistory.com 위 글과 이어지는 내용입니다. 일단 Maven Project를 생성하고 Sp..