如何打造真正可动态扩展的服务架构

云计算
Docker 的出现,以及微服务架构的兴起,让众多开源项目开始关注在松耦合的架构前提下,如何基于 Docker 实现一套真正可动态扩展的服务架构。

在互联网应用领域,服务的动态性需求十分常见,这就对服务的自动发现和可动态扩展提出了很高的要求。

[[145727]]

Docker 的出现,以及微服务架构的兴起,让众多开源项目开始关注在松耦合的架构前提下,如何基于 Docker 实现一套真正可动态扩展的服务架构。

基本需求

基本的需求包括:

  • 服务启动后要能自动被发现(vs 传统需要手动进行注册);
  • 负载要能动态在可用的服务实例上进行均衡(vs 传统需要静态写入配置);
  • 服务规模要方便进行快速调整(vs 传统需要较长时间的手动调整)。

相关项目

服务发现

服务发现的项目已经有不少,包括之前介绍的 consul,以及 skydns、serf、以及主要关注一致性的强大的 zookeeper 等。

这些项目各有优缺点,功能上大同小异,都是要通过某种机制来获取服务信息,然后通过维护一套(分布式)数据库来存储服务的信息。这也是为什么 etcd 受到大家关注和集成。

在这里,选用 HashiCorp 公司的 consul 作为服务发现的管理端,它的简介可以参考 这里。

服务注册

服务注册的手段有很多,当然,从发起方是谁可以分为两大类,主动注册还是被动探测。

主动注册,顾名思义,服务启动后,向指定的服务发现管理端的 API 发送请求,给出自身的相关信息。这样做,对管理端的要求简单了很多,但意味着服务自身要完成注册工作,并且极端情况下,管理端比较难探测出真正存活的服务。

被动探测,则是服务发现管理端通过某种机制来探测存活的服务。这样可以获取真实的服务情况,但如何探测是个很难设计的点,特别当服务类型比较复杂的时候。

以上两种,都对网络连通性要求较高。从短期看,主动注册方式会比较容易实现一些,应用情形更广泛;但长期维护上,被动探测方式应该是更高效的设计。

这里,我们选用 gliderlabs 的 registrator,它可以通过跟本地的 docker 引擎通信,来获取本地启动的容器信息,并且注册到指定的服务发现管理端。

配置更新

服务被调整后,负载均衡器要想动态重新分配负载,就需要通过配置来获取更新。这样的方案也有不少,基本上都是要安装一些本地 agent 来监听服务发现管理端的信息,生成新的配置,并执行更新命令。

HashiCorp 公司 的consul-template,可以通过监听 consul 的注册信息,来完成本地应用的配置更新。

负载均衡

负载均衡对性能要求很高,其实并不是软件所擅长的领域,但软件方案胜在成本低、维护方便。包括 lvs、haproxy 都是很优秀的设计方案。

这里,我们选用 nginx。nginx 不仅是个强大的 web 代理服务器,同时在负载均衡方面表现也不俗。更关键的,新版本的 nginx 对在线升级支持做到了极致。实时配置更新更是不在话下,可以保证服务的连续性。

实验过程

准备工作

首先,从 这里 下载模板文件。

主要内容如下:

 

  1. #backend web application, scale this with docker-compose scale web=3 
  2. web: 
  3.   image: yeasy/simple-web:latest 
  4.   environment: 
  5.     SERVICE_80_NAME: http 
  6.     SERVICE_NAME: web 
  7.     SERVICE_TAGS: backend 
  8.   ports: 
  9.   - "80" 
  10.  
  11. #load balancer will automatically update the config using consul-template 
  12. lb: 
  13.   image: yeasy/nginx-consul-template:latest 
  14.   hostname: lb 
  15.   links: 
  16.   - consulserver:consul 
  17.   ports: 
  18.   - "80:80" 
  19.  
  20. consulserver: 
  21.   image: gliderlabs/consul-server:latest 
  22.   hostname: consulserver 
  23.   ports: 
  24.   - "8300" 
  25.   - "8400" 
  26.   - "8500:8500" 
  27.   - "53" 
  28.   command: -data-dir /tmp/consul -bootstrap -client 0.0.0.0 
  29.  
  30. # listen on local docker sock to register the container with public ports to the consul service 
  31. registrator: 
  32.   image: gliderlabs/registrator:master 
  33.   hostname: registrator 
  34.   links: 
  35.   - consulserver:consul 
  36.   volumes: 
  37.   - "/var/run/docker.sock:/tmp/docker.sock" 
  38.   command: -internal consul://consul:8500 

 

如果没有安装 docker 和 docker-compose,需要先进行安装,以 ubuntu 系统为例。

 

  1. $ curl -sSL https://get.docker.com/ | sh 
  2. $ sudo pip install docker-compose 

 

执行

docker-compose 模板所在目录,执行

 

  1. $ sudo docker-compose up 

相关镜像即可自动被下载,下载完毕后,容器就启动起来了。

访问 http://localhost 可以看到一个 web 页面,提示实际访问的目标地址。

多次刷新,可以看到目标地址没有变化,这是因为,目前我们只有一个 web 后端服务器。

 

  1. 2015-08-18 03:37:58: 6 requests from <LOCAL: 172.17.1.150> to WebServer <172.17.1.148> 

调整后端为 3 个服务器。

 

  1. $ sudo docker-compose scale web=3 

然后,再次访问 http://localhost,多次刷新,可以看到访问的实际目标地址发生了变化,新启动的 web 服务器被自动注册,并且 nginx 自动对它们进行了负载均衡。

 

  1. 2015-08-18 03:37:58: 6 requests from <LOCAL: 172.17.1.150> to WebServer <172.17.1.148> 
  2. 2015-08-18 03:38:17: 5 requests from <LOCAL: 172.17.1.150> to WebServer <172.17.1.152> 
  3. 2015-08-18 03:38:20: 5 requests from <LOCAL: 172.17.1.150> to WebServer <172.17.1.153> 

 

博文出处:http://blog.csdn.net/yeasy/article/details/47749725


 

责任编辑:Ophira 来源: yeasy的专栏
相关推荐

2012-04-20 14:44:11

JavaScript

2010-09-10 09:12:49

私有云

2016-12-16 19:06:02

扩展数据库架构

2012-04-12 12:49:22

思科FlexPod架构NetApp

2023-04-05 14:37:58

2015-11-03 16:43:01

容器编排容器环境可扩展

2016-01-28 10:16:29

ConsulPaaS平台运维

2016-10-28 09:37:48

微服务架构服务

2022-09-15 07:05:39

技术架构扩展难题

2012-06-14 10:14:46

ibmdw

2021-06-30 09:40:31

MySQL数据库Java

2023-04-18 08:21:23

KafkaApache预订应用

2022-03-29 10:57:39

运维服务架构

2010-09-25 09:37:31

桌面虚拟化基础架构

2022-12-13 10:45:12

无服务器架构物联网工具

2023-09-12 07:19:06

微服务网关架构

2016-10-26 18:02:54

高可用性系统服务器

2020-07-27 08:05:17

微服务架构数据

2019-10-23 14:26:32

云计算解决方案云服务

2023-12-30 08:27:13

点赞
收藏

51CTO技术栈公众号