基于Mesos+Marathon+Zookeeper的Docker容器管理平台

刚接触docker的时候，发现docker很像一个虚拟机，随着使用的增多，它给我们的开发工作带来了极大的方便，因此就想自己搭建一个docker集群环境，以便更深入了解docker集群的工作原理。

之前曾经尝试分别安装mesos，marathon和zookeeper，组成分布式系统，但是在安装、配置过程中遇到了各种各样的问题，特别是mesos，问题比较多。既然docker容器的使用十分方便，所以我就使用基于容器的方式来搭建docker集群环境，我也推荐大家这样做，特别方便。

1. 准备工作

1.1 三台虚拟机

192.168.56.103：ubuntu-1
192.168.56.101：ubuntu-2
192.168.56.102：ubuntu-3

1.2 应用部署

三台主机分别部署zookeeper，mesos-master，mesos-slave，marathon

hostname	application
ubuntu-1	zookeeper,mesos-master,mesos-slave,marathon
ubuntu-2	zookeeper,mesos-master,mesos-slave,marathon
ubuntu-3	zookeeper,mesos-master,mesos-slave,marathon

1.3 安装docker环境

参考docker官网ubuntu操作系统安装过程

https://docs.docker.com/engine/installation/linux/ubuntulinux/

2. 下载docker镜像

docker pull mesoscloud/zookeeper   #zookeeper
docker pull mesoscloud/mesos-master   #mesos-master
docker pull mesoscloud/mesos-slave   #mesos-slave 
docker pull mesoscloud/marathon   #marathon 
docker pull davidcaste/alpine-tomcat   #tomcat

3. 启动docker镜像

以下命令分别在三台主机运行，将ip地址和相关参数修改为对应主机的ip地址和参数

3.1 运行zookeeper

docker run -d \
-e MYID= \ #每台主机对应一个id，三台主机分别对应1,2,3
-e SERVERS=.,.,. \ #三台主机的ip地址
--name=zookeeper \
--net=host \
--restart=always \
mesoscloud/zookeeper

3.2 运行mesos-master

docker run -d \
-e MESOS_HOSTNAME=. \ #第一台主机ip地址
-e MESOS_IP=. \ #第一台主机ip地址
-e MESOS_QUORUM= \
-e MESOS_ZK=zk://192.168.56.103:2181,192.168.56.101:2181,192.168.56.102:2181/mesos \
--name mesos-master \
--net host \
--restart=always \
mesoscloud/mesos-master

3.3 运行mesos-slave

docker run -d \
-e MESOS_HOSTNAME=. \ #第一台主机ip地址
-e MESOS_IP=. \ #第一台主机ip地址
-e MESOS_MASTER=zk://192.168.56.103:2181,192.168.56.101:2181,192.168.56.102:2181/mesos \
-v /sys/fs/cgroup:/sys/fs/cgroup \
-v /var/run/docker.sock:/var/run/docker.sock \
--name mesos-slave \
--net host \
--privileged \
--restart=always \
mesoscloud/mesos-slave

3.4 运行marathon

docker run -d \
-e MARATHON_HOSTNAME=. \ #第一台主机ip地址
-e MARATHON_HTTPS_ADDRESS=. \ #第一台主机ip地址
-e MARATHON_HTTP_ADDRESS=. \ #第一台主机ip地址
-e MARATHON_MASTER=zk://192.168.56.103:2181,192.168.56.101:2181,192.168.56.102:2181/mesos \
-e MARATHON_ZK=zk://192.168.56.103:2181,192.168.56.101:2181,192.168.56.102:2181/marathon \
--name marathon \
--net host \
--restart=always \
mesoscloud/marathon

4. 通过Marathon发布应用

4.1 在第一台一台主机访问http://192.168.56.103:8080，任何一台主机的8080端口都可以访问marathon，打开marathon UI，创建应用，点击Create Application，填写应用信息，发布应用，Json模式数据如下：

{
  "id": "tomcat",
  "cmd": "/opt/tomcat/bin/catalina.sh run",
  "cpus": ,
  "mem": ,
  "disk": ,
  "instances": ,
  "container": {
    "docker": {
      "image": "davidcaste/alpine-tomcat",
      "network": "BRIDGE",
      "portMappings": [
        {
          "containerPort": ,
          "protocol": "tcp",
          "name": null
        }
      ],
      "parameters": []
    },
    "type": "DOCKER",
    "volumes": [
      {
        "hostPath": "/var/dockertest/logs",
        "containerPath": "/logs",
        "mode": "RW"
      }
    ]
  },
  "env": {},
  "labels": {},
  "healthChecks": []
}

4.2 也可以通过marathon提供的rest接口发布应用

curl -X POST -H "Accept: application/json" -H "Content-Type: application/json" :/v2/apps -d'
{
  "id": "tomcat",
  "cmd": "/opt/tomcat/bin/catalina.sh run",
  "cpus": ,
  "mem": ,
  "disk": ,
  "instances": ,
  "container": {
    "docker": {
      "image": "davidcaste/alpine-tomcat",
      "network": "BRIDGE",
      "portMappings": [
        {
          "containerPort": ,
          "protocol": "tcp",
          "name": null
        }
      ],
      "parameters": []
    },
    "type": "DOCKER",
    "volumes": [
      {
        "hostPath": "/var/dockertest/logs",
        "containerPath": "/logs",
        "mode": "RW"
      }
    ]
  },
  "env": {},
  "labels": {},
  "healthChecks": []
}'