1. 程式人生 > >hadoop_hive_zookeeper_kafka_spark平臺搭建

hadoop_hive_zookeeper_kafka_spark平臺搭建

之間 park 使用 地址 階段 sel gin 關閉selinux 其他

1. 搭建linux集群

一般在學習測試階段最小的節點數是3個節點,因此在虛擬機中安裝3個節點。我使用的虛擬機環境是VMware10,linux系統是64位 Centos 6.5 minimal版本。對於安裝linux系統的過程就不在贅述了,網上有很多。安裝好linux後,需要做好3件事:

  1. 修改主機名: 在/etc/sysconfig/network文件中修改
  2. 配置靜態IP:
    技術分享
  3. 配置主機名和IP地址的映射關系
  4. 關閉防火墻
    技術分享
  5. 關閉Selinux

安裝好一個節點後,可以通過完全克隆的方式生成其他兩個節點,在這裏著重敘述下新克隆出的節點如何修改IP地址的方法。

最後設置3個節點之間的無密鑰登錄,即ssh無密鑰登錄

2. 安裝hadoop集群

hadoop_hive_zookeeper_kafka_spark平臺搭建