摘要：配置網(wǎng)絡(luò)參照生產(chǎn)環(huán)境配置中的和子網(wǎng)章節(jié)。特別注意觀察和的子網(wǎng)是否與已有網(wǎng)絡(luò)沖突如果有沖突則參考網(wǎng)絡(luò)的中的方法修改子網(wǎng)。部署使用的是的監(jiān)控方案。創(chuàng)建應(yīng)用網(wǎng)絡(luò)創(chuàng)建你也可以改成自己的名字參考網(wǎng)絡(luò)的檢查子網(wǎng)與是否配置正確。

原文

本文只是一種實(shí)際部署方案的例子，涉及到的技術(shù)有（除Docker/Docker Swarm外）：

Docker overlay network

Fluentd

Prometheus stack

vegasbrianc的Prometheus監(jiān)控方案

步驟大綱：

部署Docker machine

基本配置

配置網(wǎng)絡(luò)

啟動(dòng)Fluentd日志服務(wù)

部署Docker swarm集群

配置網(wǎng)絡(luò)

添加Node

部署Prometheus stack

給Node打Label

創(chuàng)建監(jiān)控網(wǎng)絡(luò)

啟動(dòng)service

部署應(yīng)用

識(shí)別stateless與stateful

創(chuàng)建應(yīng)用網(wǎng)絡(luò)

給Node打Label

啟動(dòng)service

準(zhǔn)備若干Linux服務(wù)器（本例使用Ubuntu 16.04），參照Docker CE 鏡像源站提到的步驟安裝Docker CE。

參照Docker Daemon生產(chǎn)環(huán)境配置。

參照Docker Daemon生產(chǎn)環(huán)境配置中的mtu和子網(wǎng)章節(jié)。

參考使用Fluentd收集Docker容器日志。

到一臺(tái)機(jī)器上執(zhí)行docker swarm init，這個(gè)機(jī)器將作為manager node。

執(zhí)行docker node ls會(huì)看到類似下面的結(jié)果：

$ docker node ls

ID                           HOSTNAME  STATUS  AVAILABILITY  MANAGER STATUS
dxn1zf6l61qsb1josjja83ngz *  manager1  Ready   Active        Leader

如果你計(jì)劃不會(huì)把工作負(fù)載跑在manager node上，那么使用docker drain：

docker node update --availability drain 

可參考Docker Swarm基本命令清單。

參考Docker Overlay網(wǎng)絡(luò)的MTU。

特別注意

觀察docker_gwbridge和ingress的子網(wǎng)是否與已有網(wǎng)絡(luò)沖突：

$ docker network inspect -f "{{json .IPAM}}" docker_gwbridge
{"Driver":"default","Options":null,"Config":[{"Subnet":"172.18.0.0/16","Gateway":"172.18.0.1"}]}

$ docker network inspect -f "{{json .IPAM}}" ingress
{"Driver":"default","Options":null,"Config":[{"Subnet":"10.255.0.0/16","Gateway":"10.255.0.1"}]}

如果有沖突則參考Docker Overlay網(wǎng)絡(luò)的MTU中的方法修改子網(wǎng)。

參考Docker Swarm基本命令清單。

使用的是vegasbrianc的Prometheus監(jiān)控方案。

整個(gè)監(jiān)控方案包含一下幾個(gè)組件：

Prometheus

Node-exporter，運(yùn)行在每個(gè)node上

Alertmanager

cAdvisor，運(yùn)行在每個(gè)node上

Grafana

挑選一臺(tái)Node作為運(yùn)行監(jiān)控服務(wù)的機(jī)器。給這個(gè)node打上label：

$ docker node update --label-add for-monitor-stack=1 

$ docker network create -d overlay --attachable monitor-net

參考參考Docker Overlay網(wǎng)絡(luò)的MTU檢查子網(wǎng)與MTU是否配置正確。

clone vegasbrianc的Prometheus監(jiān)控方案 項(xiàng)目代碼。

使用我修改過的docker-stack.yml

啟動(dòng)service：

$ docker stack deploy 
  --with-registry-auth 
  --prune 
  -c docker-stack.yml 
  p8s-monitor-stack

訪問地址：

Prometheus：http://<任意swarm node ip>:9000

Node-exporter：http://<任意swarm node ip>:9010

Alertmanager：http://<任意swarm node ip>:9020

cAdvisor：http://<任意swarm node ip>:9030

Grafana：http://<任意swarm node ip>:9040，用戶名admin，密碼foobar

如果你的應(yīng)用由多個(gè)組件（service）組成，那么在部署它們之前你得識(shí)別出哪些是stateless service哪些是stateful service。

針對(duì)每個(gè)service你自問以下三個(gè)問題：

這個(gè)service崩潰之后，是不是只需要重啟它就可以了，而不需要關(guān)心數(shù)據(jù)恢復(fù)？

這個(gè)service是否可以在node之間任意遷移，且不需要分布式存儲(chǔ)？

這個(gè)service是否無(wú)需固定IP？

如果上述回答都是Yes，那么這個(gè)service就是stateless的，只要有一個(gè)是No，則這個(gè)service是stateful的。

對(duì)于stateless service，你可以：

用docker stack deploy部署

用docker service create部署

對(duì)于stateful service，你可以：

用docker run部署

用docker-compose up部署

如果沒有固定IP的要求，那么你也可以用docker stack deploy/docker service create部署，前提是你得保證這個(gè)service只會(huì)固定在一臺(tái)機(jī)器上運(yùn)行。

有時(shí)候你的應(yīng)用既有stateless service又有stateful service，這時(shí)需要把他們掛載到同一個(gè)overlay網(wǎng)絡(luò)里，這樣它們之間就能夠互相通信了。

創(chuàng)建app-net（你也可以改成自己的名字）

$ docker network create -d overlay --attachable app-net

參考Docker Overlay網(wǎng)絡(luò)的MTU檢查子網(wǎng)與MTU是否配置正確。

如果你對(duì)于Service部署在哪個(gè)Node上有要求，那么你得給Node打上Label：

$ docker node update --label-add =1 

然后在docker-compose.yaml里添加約束條件：

version: "3.7"
services:
  busybox:
    image: busybox
    deploy:
      placement:
        constraints:
          - node.labels. == 1

對(duì)于stateless service，編寫docker-compose.yaml，里面寫了同時(shí)掛載app-net和monitor-net，比如：

version: "3.7"
services:
  busybox:
    image: busybox
    networks:
      app-net:
      monitor-net:
        aliases:
          - busybox
...
networks:
  app-net:
    external: true
  monitor-net:
    external: true

注意上面設(shè)置了busybox service在monitor-net中的別名，這是因?yàn)槿绻阌?b>docker stack deploy部署，那么busybox的名字默認(rèn)是_busybox，這樣對(duì)于prometheus而言此名字不穩(wěn)定，不便于配置詳見Prometehus監(jiān)控Docker Swarm Overlay網(wǎng)絡(luò)中的容器。

然后用docker stack deploy部署：

$ docker stack deploy 
  --with-registry-auth 
  --prune 
  -c docker-compose.yaml
  

如果用docker service create則：

$ docker service create 
 --network app-net 
 --network monitor-net 
 --name  
 ... 其他參數(shù)
 

下面舉例docker run啟動(dòng)stateful service的方法：

$ docker run -d 
  --name  
  --network app-net 
  ... 其他參數(shù) 
  
  
# 然后再掛載到monitor-net上
$ docker network connect monitor-net