2. 程式人生 > >基於docker的微服務容器化與編排

基於docker的微服務容器化與編排

阿新 • • 發佈：2019-01-11

準備

在本人的微服務系列中，已經演示了各個spring cloud微服務元件的使用，以及相關的示例微服務應用。在每次啟動微服務和對微服務進行擴容、縮容都不方便，本文使用docker-compose將以下的微服務容器化，並進行自動化部署。

相關程式碼請參考：springcloud-demo
各服務治理元件的介紹，請參考我的微服務系列文章。

1.微服務治理元件列表

名稱 描述 內部埠 暴露埠 是否部署叢集
discovery 基於Eureka Server的服務註冊中心 8761/8762 8761/8762 是
configserver 基於cloud config的配置中心 8089 8089 是
gateway 基於zuul的API閘道器 8086 8086 否
track 基於seluth+zipkin的服務跟蹤 9411 9411 否
hystrix-dashboard 基於hystrix-dashboard的服務監控 8087 8087 否
hystrix-turbine-mq 基於turbine+rabbitmq的服務監控資料收集 8089 8089 否

2.微服務示例列表

名稱 描述 內部埠 暴露埠 是否部署叢集
hello 服務提供者，依賴mysql資料庫 8000 自動 是
world 服務提供者 8010 自動 是
helloworld 服務消費者，使用restTemplate+ribbon呼叫 8020 自動 是
helloworld-feign 服務消費者，使用feign方式呼叫 8030 自動 是

3.環境與工具
- 環境 linux (ubuntu 16)
- 工具 docker+gitlab+rabbitmq+docker registry+intellij idea

+maven

操作步驟

本文編寫兩個docker-compose.yml檔案，將服務治理和服務示例分開，主要是因為服務示例依賴了服務治理，部分示例必須要等待服務治理元件載入完畢才能正常啟動，比如hello專案使用了配置中心config server的配置，config server未載入完畢，hello專案啟動異常。

雖然depends_on、links等具有啟動順序的問題，但解決不了啟動是否 ready的問題，關於這個問題，可以參考我的文章：docker-compose 啟動順序

1. 編寫 Dockerfile

在每個專案的根目錄中，編寫Dockerfile,檔案內容為

FROM java:8-jre-alpine
RUN sed -i 's/dl-cdn.alpinelinux.org/mirrors.ustc.edu.cn/' /etc/apk/repositories
VOLUME /tmp
ADD target/*.jar app.jar
RUN sh -c 'touch /app.jar'
RUN echo $(date) > /image_built_at
ENTRYPOINT ["java","-Djava.security.egd=file:/dev/./urandom","-jar","/app.jar","--spring.profiles.active=${SPRING_PROFILES_ACTIVE}"]

其中SPRING_PROFILES_ACTIVE為後面docker-compose.yml傳入的環境變數，指定專案以使用哪段配置啟動。

2. 在原有的配置檔案application.yml增加spring.profiles:docker的配置

主要是使用docker後，服務依賴的其他服務的連線發生改變，通過配置環境變數來動態接收docker-compose的配置引數。
- track增加的spring.profiles:docker配置

---
spring:
  profiles: docker
server:
  port: ${{SERVER_PORT}:9411}
eureka:
  client:
    serviceUrl:
      defaultZone: ${EUREKA_SERVER_LIST}
  • hello 增加的spring.profiles:docker配置
---
spring:
  profiles: docker
  datasource:
    url: jdbc:mysql://mysql:3306/${{MYSQL_DATABASE}:hello}
    username: ${{MYSQL_USERNAME}:user}
    password: ${{MYSQL_PASSWORD}:passworld}
    testWhileIdle: true
    validationQuery: SELECT 1
  jpa:
    show-sql: false
    hibernate:
      ddl-auto: update
      naming-strategy: org.hibernate.cfg.ImprovedNamingStrategy
      properties:
        hibernate:
          dialect: org.hibernate.dialect.MySQL5Dialect
  zipkin:
    base-url: http://track:9411

eureka:
  client:
    serviceUrl:
      defaultZone: ${EUREKA_SERVER_LIST}

${{MYSQL_USERNAME}:user} 是指配置檔案在啟動的時候如果沒有讀取到環境變數MYSQL_USERNAME的值，則使用預設值user。這種配置在開發的時候十分有用，比如切換開發、測試、生產環境配置。

3. 編寫批量編譯的shell指令碼images-build.sh

該指令碼將進入到各個專案中，使用maven對專案進行打包，然後使用docker，根據Dockerfile對專案進行構建，生成分別帶有:lastest 和當前日期標籤的兩個映象。

#!/bin/bash

# 編譯所有的程式碼，生成docker 映象
function progress(){
    local GREEN CLEAN
    GREEN='\033[0;32m'
    CLEAN='\033[0m'
    printf "\n${GREEN}[email protected]  ${CLEAN}\n" >&2
}

set -e

# 映象倉庫字首
REGPREFIX=127.0.0.1:5000/billjiang
TOTAL=10

#discovery server
progress "Building discovery-server(1/${TOTAL}) jar file ..."
cd common/discovery
mvn clean package -DskipTests
progress "Building discovery(eureka server)(1/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/discovery -q .) ${REGPREFIX}/discovery:$(date -u "+%Y%m%d-%H%M%S")
cd -

#config server
progress "Building config-server(2/${TOTAL}) jar file ..."
cd common/configserver
mvn clean package -DskipTests
progress "Building config server(2/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/configserver -q .) ${REGPREFIX}/configserver:$(date -u "+%Y%m%d-%H%M%S")
cd -

#gateway
progress "Building gateway-zuul(3/${TOTAL}) jar file ..."
cd common/gateway
mvn clean package -DskipTests
progress "Building gateway-zuul(3/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/gateway -q .) ${REGPREFIX}/gateway:$(date -u "+%Y%m%d-%H%M%S")
cd -

#track sleuth+zipkin
progress "Building track(sleuth+zipkin)(4/${TOTAL}) jar file ..."
cd common/track
mvn clean package -DskipTests
progress "Building track by sleuth+zipkin(4/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/track -q .) ${REGPREFIX}/track:$(date -u "+%Y%m%d-%H%M%S")
cd -

#hystrix-dashboard
progress "Building hystrix-dashboard(5/${TOTAL}) jar file ..."
cd common/hystrix-dashboard
mvn clean package -DskipTests
progress "Building hystrix-dashboard(5/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/hystrix-dashboard -q .) ${REGPREFIX}/hystrix-dashboard:$(date -u "+%Y%m%d-%H%M%S")
cd -

#hystrix-turbine-mq
progress "Buildinhg hystrix-turbine-mq(6/${TOTAL}) jar file ..."
cd common/hystrix-turbine-mq
mvn clean package -DskipTests
progress "Building hystrix-turbine-mq(6/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/hystrix-turbine-mq -q .) ${REGPREFIX}/hystrix-turbine-mq:$(date -u "+%Y%m%d-%H%M%S")
cd -

#hello
progress "Buildinhg hello service(7/${TOTAL}) jar file ..."
cd service/hello
mvn clean package -DskipTests
progress "Building hello service(7/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/hello -q .) ${REGPREFIX}/hello:$(date -u "+%Y%m%d-%H%M%S")
cd -


#world
progress "Buildinhg world service(8/${TOTAL}) jar file ..."
cd service/world
mvn clean package -DskipTests
progress "Building world service(8/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/world -q .) ${REGPREFIX}/world:$(date -u "+%Y%m%d-%H%M%S")
cd -

#helloworld
progress "Buildinhg helloworld service(9/${TOTAL}) jar file ..."
cd service/helloworld
mvn clean package -DskipTests
progress "Building helloworld service(9/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/helloworld -q .) ${REGPREFIX}/helloworld:$(date -u "+%Y%m%d-%H%M%S")
cd -

#helloworld-feign
progress "Buildinhg helloworld-feign service(10/${TOTAL}) jar file ..."
cd service/helloworld-feign
mvn clean package -DskipTests
progress "Building helloworld-feign service(10/${TOTAL}) docker image ..."
docker tag $(docker build -t ${REGPREFIX}/helloworld-feign -q .) ${REGPREFIX}/helloworld-feign:$(date -u "+%Y%m%d-%H%M%S")
cd -

4. 進入到專案目錄springcloud-demo，執行bash images-build.sh進行批量編譯打包

批量編譯打包springcloud-demo.png

5. 建立服務治理元件的docker-compose.yml，編寫如下內容

version: "2"
services:

  #啟動註冊中心eureka-server叢集 集中管理/服務註冊/服務發現
  discovery1:
    container_name: discovery1
    image: 127.0.0.1:5000/billjiang/discovery
    ports:
      - "8761:8761"
    environment:
      - ADDITIONAL_EUREKA_SERVER_LIST=http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8761

  discovery2:
    container_name: discovery2
    image: 127.0.0.1:5000/billjiang/discovery
    ports:
      - "8762:8762"
    environment:
      - ADDITIONAL_EUREKA_SERVER_LIST=http://discovery1:8761/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8762
    links:
      - discovery1

  #啟動配置中心config-server叢集 配置更新/配置集中管理/多環境配置
  config1:
    container_name: configserver1
    image: 127.0.0.1:5000/billjiang/configserver
    ports:
      - "8090:8090"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8090
    links:
      - discovery1
      - discovery2

  config2:
    container_name: configserver2
    image: 127.0.0.1:5000/billjiang/configserver
    ports:
      - "8091:8091"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8091
    links:
      - discovery1
      - discovery2

  #啟動閘道器gateway,可配置成叢集,使用nginx進行負載 智慧路由/安全控制/負載均衡
  gateway:
    container_name: gateway
    image: 127.0.0.1:5000/billjiang/gateway
    ports:
      - "8086:8086"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8086
    links:
      - discovery1
      - discovery2


  # 啟動seluth+zipkin zipkin服務跟蹤/依賴視覺化
  track:
    container_name: track
    image: 127.0.0.1:5000/billjiang/track
    ports:
      - "9411:9411"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=9411
    links:
      - discovery1
      - discovery2


   # hystrix
  # 啟動hystrix-dashboard
  hystrix-dashboard:
    container_name: hystrix-dashboard
    image: 127.0.0.1:5000/billjiang/hystrix-dashboard
    ports:
      - "8087:8087"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8087
    links:
      - discovery1
      - discovery2

  # 啟動hystrix-turbine-mq  基於訊息中介軟體的實時效能資料收集
  hystrix-turbine-mq:
    container_name: hystrix-turbine-mq
    image: 127.0.0.1:5000/billjiang/hystrix-turbine-mq
    ports:
      - "8089:8089"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8089
    links:
      - discovery1
      - discovery2

  mysql:
    container_name: mysql
    image: mysql:5.7
    environment:
      - MYSQL_ROOT_PASSWORD=passw0rd
      - MYSQL_DATABASE=foodb
      - MYSQL_USER=user1
      - MYSQL_PASSWORD=passw0rd

6. 在service目錄下，建立服務示例的docker-compose.yml，編寫如下內容

version: "2"
services:



  # 啟動 hello
  hello:
    image: 127.0.0.1:5000/billjiang/hello
    ports:
      - "8000"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - MYSQL_DATABASE=foodb
      - MYSQL_USERNAME=user1
      - MYSQL_PASSWORD=passw0rd
    external_links:
      - mysql
      - config1
      - config2
      - gateway
      - track

  # 啟動 world
  world:
    image: 127.0.0.1:5000/billjiang/world
    ports:
      - "8010"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT:8010
    external_links:
      - config1
      - config2
      - gateway
      - track

  # 啟動 helloworld
  helloworld:
    image: 127.0.0.1:5000/billjiang/helloworld
    ports:
      - "8020"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT:8020
    external_links:
      - config1
      - config2
      - gateway
      - track
    links:
      - hello
      - world
  # 啟動 hello
  helloworld-feign:
    image: 127.0.0.1:5000/billjiang/helloworld-feign
    ports:
      - "8030"
    environment:
      - EUREKA_SERVER_LIST=http://discovery1:8761/eureka/,http://discovery2:8762/eureka/
      - SPRING_PROFILES_ACTIVE=docker
      - SERVER_PORT=8030
    external_links:
      - config1
      - config2
      - gateway
      - track
    links:
      - hello
      - world

# 其他服務 ..........................
networks:
  default:
    external:
      name: springclouddemo_default

因為docker-compose啟動的時候預設會建立一個springclouddemo_default的網路，兩個網路要通訊，所以服務示例指定使用springclouddemo_default，這樣元件之間客戶互相通訊了。

6. 啟動服務治理的docker-compose.yml

在springcloud-demo根目錄下，使用docker-compose up啟動服務編排，如下介面所示：
服務治理服務編排啟動1.png

服務治理服務編排啟動2.png

啟動後，開啟註冊中心地址，檢視已經啟動的服務：
已經啟動的服務列表.png

7. 連線外部docker容器

配置中心使用到了gitlab, 服務跟蹤track使用了rabbitmq，這兩個容器都不在docker-compose之中，要使得能夠互相連通，要把這兩個容器也加入到springclouddemo_default網路。

docker network connect springclouddemo_default gitlab
docker network connect springclouddemo_default rabbitmq

使用docker network inspect springclouddemo_default可以檢視到已經加入網路的容器。

8. 啟動服務示例編排docker-compose.yml

進入到service目錄，使用docker-compose up啟動服務示例編排，如下所示：

服務示例編排1.png
服務示例編排2

9. 在Eureka Server檢視新增的服務

新增註冊服務.png

10. 可以使用如下命令對服務進行擴容

scale擴容.png

重新整理Eureka Server，可以看到服務已經擴充套件到三個節點。

擴容後.png

相關推薦

基於docker的微服務容器化與編排

準備 在本人的微服務系列中，已經演示了各個spring cloud微服務元件的使用，以及相關的示例微服務應用。在每次啟動微服務和對微服務進行擴容、縮容都不方便，本文使用docker-compose將以下的微服務容器化，並進行自動化部署。 相關程式碼請參考：s

Docker+Kubernetes(k8s)微服務容器化實踐

k8sDocker+Kubernetes(k8s)微服務容器化實踐網盤地址：https://pan.baidu.com/s/1uVkMsKgfzsJcShlnuLk3ZQ 密碼：1i7q備用地址（騰訊微雲）：https://share.weiyun.com/5ZcsfIX 密碼：udrifz Docker官方

Docker+Kubernetes(k8s)微服務容器化實踐視頻課程

Docker 第1章 初識微服務微服務的入門，我們從傳統的單體架構入手，看看在什麽樣的環境和需求下一步步走到微服務的，然後再具體了解一下什麽才是微服務，讓大家對微服務的概念有深入的理解。然後我們一起畫一個微服務的架構圖，再從架構上去分析微服務架構的優勢和不足。 ...第2章 微服務帶來的問題及解決方案分析通過

【 專欄 】- Docker+Kubernetes(k8s)微服務容器化實踐

Docker+Kubernetes(k8s)微服務容器化實踐 Docker官方支援Kubernetes， Kubernetes是容器編排最大贏家，Kubernetes 以其高效、簡便、高水平的可移植性等優勢佔領了絕大部分市場，江湖

Docker+Kubernetes(k8s)微服務容器化實戰視頻教程

r+ 網關 tla 依賴 全自動 第2章 服務架構 漸進 什麽 第1章 初識微服務微服務的入門，我們從傳統的單體架構入手，看看在什麽樣的環境和需求下一步步走到微服務的，然後再具體了解一下什麽才是微服務，讓大家對微服務的概念有深入的理解。然後我們一起畫一個微服務的架構圖，再從

微服務容器化構建改造（1）--整體方案

涉及技術 Docker + Rancher + SwarmKit + Jenkins 背景: 大規模推進微服務的背景下，大量應用切分粒度更細。為大量應用服務的部署及機器資源的分配使用帶來了繁雜而高昂的成本。 在Serverless大潮下，傳統應用的容器化改造成了標準的跨入門檻。 目標：

有容雲：微服務架構最佳實踐課堂PPT- 微服務容器化的挑戰和解決之道

編者注： 本文為6月18日有容雲架構師馬洪喜在七牛微服務架構最佳實踐課堂的演講PPT，文中跟大家一起探討了如何通過容器技術將微服務和DevOps落地，構築企業容器雲，助力應用微服務化。 內容簡介 為了給海量使用者提供穩定可靠、快速便捷的服務，產品的敏捷開發、快速迭代

微服務容器部署與持續整合

學習目標 理解Dockerfile的作用，能編寫簡單的Dockerfile指令碼完成映象的構建 完成Docker私有倉庫的構建，能夠運用Maven外掛完成映象的建立與上傳 能夠使用Jenkins完成程式碼的持續整合 1 Dockerfile 1.1 什麼是Dockerfile Dockerfile是由一系

微服務與服務容器化

軟體架構 軟體架構是在軟體的內部，經過綜合各種因素的考量、權衡，選擇特定的技術，將系統劃分成不同的部分並使這些部分相互分工，彼此協作，為使用者提供需要的價值。 軟體架構影響因素 業務需求：需要實現的功能 技術棧：選擇用於實現功能的技術 成本：願意為開發軟體付出的價值

《SpringCloud與Docker微服務架構實戰》 第七八章 服務容錯閘道器

                        &nb

《SpringCloud與Docker微服務架構實戰》 第四五六章 服務註冊發現與呼叫

                         

《SpringCloud與Docker微服務架構實戰》 第九十章 服務配置跟蹤常見問題

                                &nb

新浪微博基於Docker的混合雲架構與應用實踐

大家好！先做一個自我介紹，我來自新浪微博，付穩，屬於微博平臺研發中心，本次分享的主題是新浪微博DCP基於Docker的混合雲架構與應用實踐。今天的主題是Swarm、Mesos、Kubernetes的三國演義，但是我可能更多講的是大型網際網路公司在排程框架選型或者它依賴的中

基於 DevOps 的微服務生態系統與工程實踐（三）

作者簡介： 王磊 華為 中央軟體院首席軟體工程技術專家 國內首批 DevOps Master 認證講師，《DevOps Handbook》中文譯者。 並著有國內首本微服務架構相關書籍《微服務架構與實踐》一書。 前言 從2014年開始，當我接觸微服務之後，我發現在微服務的演進過程中，開發和測試、運維

基於 DevOps 的微服務生態系統與工程實踐（一）

本文來自於 GOPS 2017 深圳站的演講《基於 DevOps 的微服務生態系統與工程實踐》，DevOps時代公眾號連續三篇文章詳細解讀DevOps與微服務的祕密。 作者簡介： 王磊 華為 中央軟體院首席軟體工程技術專家 國內首批 DevOps Master 認證講師，《DevOps Handb

《spring cloud與docker微服務架構實戰》註解總結

基於spring-boot 1.4.3.RELEASE 和 spring-cloud Camden.SR4 的註解總結一、spring-cloud註解1、@SpringBootApplication spring啟動註解2、@EnableEurekaServer 註冊為Eur

可持續自動化構建微服務(11)SpringCloud 與 Docker 結合

第十一章 SpringCloud 與 Docker 結合 11、 SpringCloud 與 Docker 結合下面我們把第六章的兩個Spring Cloud專案與docker結合起來，實現程式的編譯、

Spring Cloud與Docker微服務架構實戰 PDF

電子版百度雲下載 連結: https://pan.baidu.com/s/115u011CJ8MZzJx_NqutyTQ 提取碼: 關注公眾號【GitHubCN】回覆2019獲取 本書的程式碼 共計70+個DEMO 覆蓋Eureka、Ribbon、Feign、Hystrix、Zuul、Spring

基於SpringCloud 微服務架構下 廣告系統設計與實現

互聯 編碼 課程總結 搭建 增刪 統一 維護 boa lan 第1章 課程簡介本章對這門課程進行說明，包括：廣告系統的介紹、課程使用的技術介紹、課程的學習規劃等。 第2章 廣告系統概覽與準備工作本章會介紹廣告系統的思想、廣告系統的技術實現架構、學習本課程之前的準備工作和廣告

k8s（六）、微服務框架istio服務視覺化與監控

前言： 承接上文k8s（五）、微服務框架istio流量策略控制 ，測試環境需保留上文中的環境，在本文將重點展示istio微服務呼叫鏈關係展示，以及微服務工作狀態監測，涉及元件有： prometheus \ grafana \ jaeger等 微服務呼