Spark 異常匯總(持續更新)
阿新 • • 發佈:2018-05-03
ive java con 解決方法 ini IT bsp apache AR
Only one SparkContext may be running in this JVM (see SPARK-2243). To ignore this error, set spark.driver.allowMultipleContexts = true. The currently running SparkContext was created at: org.apache.spark.SparkContext.<init>(SparkContext.scala:82) com.demo.sadsa.SparkDemo(sadsa.scala:26) sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method) sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)
原因:
嘗試在已啟動SparkContext的相同JVM中實例化另一個SparkContext時,SparkContext構造函數將引發異常。
解決方法:spark.driver.allowMultipleContexts = true關閉異常。
Spark 異常匯總(持續更新)