1. 程式人生 > >獨一無二 hortonworks spark 源碼編譯教程

獨一無二 hortonworks spark 源碼編譯教程

hub ubuntu epo ase mave spark com AS repos

hortonworks的源碼在github上能找到!

https://github.com/hortonworks/spark2-release

找到對應版本release源碼後下載到本地

使用ubuntu進行編譯,必須在unix下面編譯

spark項目使用了hortonworks的私人遠程庫!

地址:http://nexus-private.hortonworks.com/nexus/content/groups/public

編譯工具是maven,倉庫配置方法:打開spark項目根目錄下pom.xml,找到repositories節點,添加

<repository>
<id>public</id>
<url>http://nexus-private.hortonworks.com/nexus/content/groups/public</url>
</repository>

調用./build/mvn -DskipTests clean package 開始編譯

獨一無二 hortonworks spark 源碼編譯教程