目錄

用 [TOC]來生成目錄：

Mesos 的叢集實踐

搭建mesos叢集包含以下元件，zookeeper, mesos, marathon。
如果實現服務發現，可以利用mesos-dns或者第三方元件consul。
本文主要介紹如何搭建一個多節點的穩定的mesos叢集，並分別利用mesos-dns和consul實現服務發現的方案。

搭建mesos叢集之前先要搭建一個zookeeper叢集，可以是單節點也可以多節點，目的是利用zookeeper叢集儲存mesos節點的資訊。本文搭建3個節點的zookeeper叢集

1. 搭建3節點的zookeeper叢集

$ tar -zxvf
 
 zookeeper-3.4.9.tar.gz -C /usr/local
$ cp /usr/local/zookeeper-.3.4.9/conf/zoo_sample.cfg /usr/local/zookeeper-3.4.9/conf/zoo.cfg
$ vim /usr/local/zookeeper-3.4.9/conf/zoo.cfg

dataDir=/usr/local/zookeeper-3.4.9/data
dataLogDir=/usr/local/zookeeper-3.4.9/log

server.1=<zookeeper_ip_01>:2888:3888
server.2=<zookeeper_ip_02>
 
:2888:3888
server.3=<zookeeper_ip_03>:2888:3888

$ mkdir /usr/local/zookeeper-3.4.9/data
$ mkdir /usr/local/zookeeper-3.4.9/log

注意：
Server.A = B:C:D
A表示zookeeper節點的編號, B表示對應主機節點的IP， C表示leader節點與其他follower節點交換資訊的埠號，D表示當現在的leader節點down掉之後，所有節點互相通訊選擇新的leader節點時通訊的埠。

分別在3臺主機節點上編輯myid檔案， 第一行在主機zookeeper_ip_01上執行，第二行在主機zookeeper_ip_02上執行，第三行在主機zookeeper_ip_03上執行

$ echo 1 > /usr/local/zookeeper-3.4.9/data/myid 
$ echo 2 > /usr/local/zookeeper-3.4.9/data/myid 
$ echo 3 > /usr/local/zookeeper-3.4.9/data/myid 

啟動zookeeper叢集，並檢視叢集狀態。

$ cd /usr/local/zookeeper-3.4.9/bin
$ ./zkServer.sh start
$ ./zkServer.sh status

2. 搭建3節點的mesos叢集

下載mesos安裝包 http://mesos.apache.org/downloads
本文用的mesos-1.1.0
在所有節點上編譯並安裝mesos
首先解壓mesos原始碼包到/opt目錄，然後下載編譯mesos所需的依賴包

$ tar -zxvf mesos-1.1.0.tar.gz -C /opt
$ apt-get update
$ apt-get install -y tar wget git
$ apt-get install -y openjdk-8-jdk
$ apt-get install build-essential python-dev libcurl4-nss-dev libsasl2-dev libsasl2-modules maven libapr1-dev libsvn-dev zlib1g-dev

編譯mesos

$ cd /opt/mesos-1.1.0
$ mkdir build
$ mkdir /usr/local/mesos
$ cd build
$ ../configure --prefix=/usr/local/mesos
$ make
$ make install

編譯完成之後，需要在每個節點上配置些資訊。
在每個節點上建立 masters, slaves檔案

$ vim /usr/local/mesos/etc/mesos/masters
master_ip_01
master_ip_02
master_ip_03

$ vim /usr/local/mesos/etc/mesos/slaves
slave_ip_01
slave_ip_02
slave_ip_03

在所有master節點上配置mesos-master-env.sh

$ vim /usr/local/mesos/etc/mesos/mesos-master-env.sh

export MESOS_log_dir=/var/log/mesos
export MESOS_work_dir=/var/lib/mesos
export MESOS_cluster=Mesos-Cluster
export MESOS_zk=zk://<zookeeper_ip_01>:2181,<zookeeper_ip_02>:2181,<zookeeper_ip_03>:2181/mesos
export MESOS_quorum=3

在所有的slave(agent)節點上配置mesos-agent-env.sh

export MESOS_log_dir=/var/log/mesos
export MESOS_work_dir=/var/lib/mesos
export MESOS_containerizers=docker,mesos
export MESOS_master=zk://<zookeeper_ip_01>:2181,<zookeeper_ip_02>:2181,<zookeeper_ip_03>:2181/mesos

配置完成之後，需要在每個master和slave(agent)節點上配置免金鑰登入，方便啟動mesos叢集，否則還需要輸入每個節點的密碼。

$ ssh-keygen

在每個主機上生成公私鑰之後，將自己的公鑰 ~/.ssh/id_rsa.pub 拷貝到其他所有節點的~/.ssh/authorized_keys

然後就可以啟動mesos叢集了。

$ cd /usr/local/mesos
$ ./sbin/mesos-start-cluster.sh

3. 部署marathon叢集

$ tar -zxf marathon-1.3.9.tgz -C /usr/local

啟動marathon

$ MESOS_NATIVE_JAVA_LIBRARY=/usr/local/mesos/lib/libmesos.so ./bin/start --master zk://<zookeeper-ip-01>:2181,<zookeeper-ip-02>:2181,<zookeeper-ip-03>:2181/mesos --zk zk://<zookeeper-ip-01>:2181,<zookeeper-ip-02>:2181,<zookeeper-ip-03>:2181/marathon >> /var/log/marathon.log 2>&1 &