1. 程式人生 > >hive與spark的匹配版本彙總

hive與spark的匹配版本彙總

版本資訊來自於hive的原始碼包的pom.xml檔案中,彙總下:

apache-hive-1.2.2-src <spark.version>1.3.1</spark.version>
apache-hive-2.1.1-src <spark.version>1.6.0</spark.version>
apache-hive-2.3.3-src <spark.version>2.0.0</spark.version>
apache-hive-3.0.0-src <spark.version>2.3.0</spark.version>


stackoverflow上可行的例子是:
spark 2.0.2 with hadoop 2.7.3 and hive 2.1
參考連結:
https://stackoverflow.com/questions/42281174/hive-2-1-1-on-spark-which-version-of-spark-should-i-use

 

qq群裡網友給出的版本是:

Hive 2.6 spark2.2.0

 

 

我自己的當前版本如下,暫時沒發現有什麼相容性問題:

apache-hive-3.0.0-bin

hadoop-3.0.3

spark-2.3.1-bin-hadoop2.7