Yum安裝mesos+zookeeper+marathon管理docker集群
Apache-Mesos簡介
Apache-Mesos是一款基於多資源(內存、CPU、磁盤、端口等)調度的開源集群管理套件,能使容錯和分布式系統更加容易使用。官方網站http://mesos.apache.org/ ,軟件能夠自由下載使用。
Apache-Mesos工作原理
Apache-Mesos采用Master/Slave結構來簡化設計,將Master做得盡可能輕量級,僅保存各種計算框架(Framework)和Mesos Slave的狀態信息,這些狀態很容易在Mesos出現故障的時候被重構,除此之外Mesos還使用Zookeeper解決Master單點故障的問題。
Apache-Mesos基本術語
Mesos Master:負責管理各個Framework和Slave,並將Slave上的資源分配給各個Framework。
Mesos Slave:負責管理本節點上的各個Mesos Task,為各個Executor分配資源。
Framework:計算機框架,如:Hadoop、Spark等,可以通過MesosSchedulerDiver接入Mesos。
Executor:執行器,在Mesos Slave上安裝,用於啟動計算框架中的Task。
Zookeeper簡介
ZooKeeper是用來給集群服務維護配置信息,域名服務,提供分布式同步和提供組服務。所有這些類型的服務都使用某種形式的分布式應用程序。ZooKeeper是一個分布式的,開放源碼的協調服務,是的Chubby一個的實現,是Hadoop和Hbase的重要組件。
ZooKeeper角色
領導者(leader):領導者負責投票發起和決議,更新系統狀態
跟隨者(follwoer):follower用於接收客戶請求並向客戶端返回結果,在選主過程中參與投票
觀察者:ObServer可以接受客戶端連接,將寫請求轉發給leader節點,但ObServer不參加投票過程,只同步leader的狀態,ObServer的目的是為了拓展系統,提高讀取速度。
客戶端:請求發起方
服務器架構
主機名 | IP地址 | 安裝軟件包 |
---|---|---|
master | 172.16.10.138 | docker、mesos-master、mesos-slave、marathon、zookeeper |
slave | 172.16.10.147 | docker、mesos-slave、zookeeper |
- 查看Linux系統版本及內核版本信息(本實驗需內核版本在3.10及以上)
cat /etc/redhat-release //查看系統版本
uname -r //查看內核版本信息
- 關閉兩臺服務器的防火墻及SELinux
systemctl stop firewalld.service
systemctl disable firewalld.service //禁止開機啟動防火墻
setenforce 0
服務架構部署
- 修改主機名及hosts解析文件
vim /etc/hosts //兩臺服務器都進行修改
172.16.10.138 master
172.16.10.147 slave
hostnamectl set-hostname master //master服務器修改主機名
hostnamectl set-hostname slave //slave服務器修改主機名
修改完畢後需重啟服務器使配置生效
- 配置安裝Java環境
rpm -ivh jdk-8u171-linux-x64.rpm //rpm一鍵安裝Java環境包
java -version //查看java環境
部署mesos
- master服務器上安裝部署mesos服務
rpm -ivh http://repos.mesosphere.com/el/7/noarch/RPMS/mesosphere-el-repo-7-1.noarch.rpm //下載mesosphere倉庫
yum -y install mesos //安裝mesos服務
- 安裝docker服務
yum -y install docker
systemctl start docker.service //開啟docker服務
systemctl enable docker.service //開機自啟動服務
docker pull nginx //下載nginx鏡像
部署zookeeper服務
- 解壓zookeeper軟件,安裝配置
mkdir /zoo
tar zxvf zookeeper-3.4.6.tar.gz -C /zoo
cd /zoo/
ln -s zookeeper-3.4.6/ zookeeper
cd zookeeper/conf/
grep -v "#" zoo_sample.cfg > zoo.cfg
vim zoo.cfg //修改配置文件
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/zoo/zookeeper/data //修改zookeeper數據文件存放目錄
clientPort=2181 //端口
server.1=172.16.10.138:2333:3222
server.2=172.16.10.147:2333:3222
- 創建zookeeper的數據文件存放目錄及myid文件
mkdir ../data
echo 1 > ../data/myid
cat ../data/myid
- 開啟zookeeper服務,查看狀態
/zoo/zookeeper/bin/zkServer.sh start //開啟zookeeper服務
/zoo/zookeeper/bin/zkServer.sh status //查看狀態信息
部署slave服務器
- slave服務器上安裝部署mesos服務
rpm -ivh http://repos.mesosphere.com/el/7/noarch/RPMS/mesosphere-el-repo-7-1.noarch.rpm //下載mesosphere倉庫
yum -y install mesos //安裝mesos服務
- 安裝docker服務
yum -y install docker
systemctl start docker.service //開啟docker服務
systemctl enable docker.service //開機自啟動服務
docker pull nginx //下載nginx鏡像
- 安裝配置zookeeper服務
[root@slave docker]# mkdir /zoo
[root@slave docker]# tar xf zookeeper-3.4.6.tar.gz -C /zoo //解壓zookeeper軟件包至/zoo目錄下
[root@slave docker]# cd /zoo/
[root@slave zoo]# ls
zookeeper-3.4.6
[root@slave zoo]# ln -s zookeeper-3.4.6/ zookeeper /創建軟鏈接
[root@slave zoo]# cd zookeeper/conf/
[root@slave conf]# grep -v "#" zoo_sample.cfg > zoo.cfg //反向過濾zoo_sample.cfg的配置文件並且重定向生成zoo.cfg
[root@slave conf]# vim zoo.cfg //修改zoo.cfg配置文件
tickTime=2000
initLimit=10
syncLimit=5
dataDir=/zoo/zookeeper/data //修改zookeeper數據文件存放目錄
clientPort=2181 //端口
server.1=172.16.10.138:2333:3222
server.2=172.16.10.147:2333:3222
[root@slave conf]# mkdir ../data //創建數據存放目錄
[root@slave conf]# echo 2 > ../data/myid //在數據存放目錄下創建myid文件
[root@slave conf]# cat ../data/myid //查看驗證myid文件
2
- 開啟zookeeper服務,查看狀態
/zoo/zookeeper/bin/zkServer.sh start //開啟zookeeper服務
/zoo/zookeeper/bin/zkServer.sh status //查看狀態信息
這裏可以看到兩臺服務器上的zookeeper服務的狀態信息,其中slave服務器為leader,而master服務器為follower
- master安裝marathon並且開啟服務
tar zxvf marathon-0.15.2.tgz -C /opt //解壓marathon軟件包
cd /opt
/opt/marathon-0.15.2/bin/start --hostname 172.16.10.138 --master zk://172.16.10.138:2181/mesos //開啟marathon服務
- 分別開啟兩臺服務器的mesos服務,網頁登錄mesos和marathon服務檢測服務是否開啟
systemctl start mesos-master //master服務器開啟mesos-master服務
systemctl start mesos-slave //slave服務器開啟mesos-slave服務
- 使用marathon調度mesos創建docker容器
編輯json文件
vim nginx.json
{
"id":"nginx",
"cpus":0.1,
"mem":10,
"instances": 1,
"constraints":[["hostname", "UNIQUE",""]],
"container": {
"type":"DOCKER",
"docker": {
"image": "nginx",
"network": "BRIDGE",
"portMappings": [
{"containerPort": 80,"hostPort": 0,"servicePort": 0, "protocol":"tcp" }
]
}
}
}
curl -X POST -H "Content-type:application/json" http://172.16.10.138:8080/v2/apps [email protected] //調用json部署nginx
然後就可以在mesos網頁界面和marathon的網頁界面查看到執行的任務
Yum安裝mesos+zookeeper+marathon管理docker集群