1. 程式人生 > >hadoop maven pom.xml檔案的配置

hadoop maven pom.xml檔案的配置

轉載至   http://blog.csdn.net/qq_33813365/article/details/70214484         

              http://www.cnblogs.com/Leo_wl/p/4862820.html


JDK版本的要求
  • Hadoop 2.7 以及之後的版本,需要JDK 7;
  • Hadoop 2.6 以及之前的版本,支援JDK 6;
對於Hadoop1.x.x版本,只需要引入1個jar:
  1. hadoop-core
對於Hadoop2.x.x版本,需要引入4個jar:
  1. hadoop-common
  2. hadoop-hdfs
  3. hadoop-mapreduce-client-core

  4. hadoop-client
  5. jdk.tools(一般需要引入,否則報錯)
需要的Jar包 (對應版本:2.x.x)
  1. <properties>
  2. <hadoopVersion>2.5.2</hadoopVersion>
  3. </properties>
  4. <!--Hadoop start -->
  5. <dependency>
  6. <groupId>org.apache.hadoop</groupId>
  7. <artifactId>hadoop-common</artifactId>
  8. <version>
    ${hadoopVersion}</version>
  9. </dependency>
  10. <dependency>
  11. <groupId>org.apache.hadoop</groupId>
  12. <artifactId>hadoop-hdfs</artifactId>
  13. <version>${hadoopVersion}</version>
  14. </dependency>
  15. <dependency>
  16. <groupId>org.apache.hadoop</groupId>
  17. <artifactId
    >hadoop-mapreduce-client-core</artifactId>
  18. <version>${hadoopVersion}</version>
  19. </dependency>
  20. <dependency>
  21. <groupId>org.apache.hadoop</groupId>
  22. <artifactId>hadoop-client</artifactId>
  23. <version>${hadoopVersion}</version>
  24. </dependency>
  25. <!--Hadoop-->
  26. <dependency>
  27. <groupId>jdk.tools</groupId>
  28. <artifactId>jdk.tools</artifactId>
  29. <version>1.6</version>
  30. <scope>system</scope>
  31. <systemPath>${JAVA_HOME}/lib/tools.jar</systemPath>
  32. </dependency>
需要的Jar包 (對應版本:1.2.1)
  1. <properties>
  2. <hadoopVersion>1.2.1</hadoopVersion>
  3. </properties>
  4. <dependency>
  5. <groupId>org.apache.hadoop</groupId>
  6. <artifactId>hadoop-core</artifactId>
  7. <version>${hadoopVersion}</version>
  8. </dependency>

三:官網依賴庫

  我們可以直接去官網查詢我們需要的依賴包的配置pom,然後加到專案中。

四:構建完畢

  點選儲存,就會發現maven在幫我們吧所需要的環境開始構建了。

  等待構建完畢。