`
IXHONG
  • 浏览: 449410 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

从0开始的微服务架构:(二)如何快速体验微服务架构?

阅读更多

记得好久之前看到一个大牛说过:如果单体架构都搞不好,就别搞微服务架构。乍一看,这句很有道理,后来发现这句话是不太对的,因为微服务架构的目的就是为了降低系统的复杂性,所以 微服务架构应该比单体架构更简单、更好实践才对

这篇文章,我们就分享一下如何搭建一个 简单模式 的微服务架构。

什么是微服务架构的简单模式?

相对于大型互联网平台动辄几万并发的访问量,或者每天多次的在线版本发布,绝大多数企业和项目并没有这样的需求。他们关注的是如何更好地提高开发效率,如何更快地实现新需求,如何更便利地运维,等等。

微服务架构的简单模式就是可以满足以上需求的软件架构方案。

相对于“完美”的微服务架构方案,微服务架构简单模式可以暂且不用关注保障数据一致性的分布式事务技术、方便程序包在环境间(开发、测试、生产)迁移的配置中心组件、监控 API 调用情况的调用链组件、避免系统超载的断路器组件、方便 API 管理和测试的 API 文档框架、Zookeeper、Redis,以及各种 MQ。只需要关注常常谈到的 注册中心服务发现负载均衡 和 服务网关 即可。

如何将微服务架构的简单模式落地?

落地微服务架构,重点就是发扬优点,克服缺点。如前篇文章《Re: 从 0 开始的微服务架构:(一)重识微服务架构》的对比所示,相对于单体架构,微服务架构最大的缺点是 上手难 和 运维难

下面我们就来看看如何从这两个方面入手,将微服务架构的简单模式落地。

上手难

相对于传统的单体架构,微服务架构一下子引入了太多的概念,让新手有点无可适从。所以,我们更要去芜存菁,理清楚哪些是自身需要的,哪些只是江湖上的传说。下面就来看看哪些组件是开发一个微服务架构的系统所必需的。

首先说一下,使用微服务简单模式进行开发的四个步骤:

第一步:沿用组织中现有的技术体系开发单一职责的微服务。

第二步:服务提供方将地址信息注册到注册中心,调用方将服务地址从注册中心拉下来。

第三步:通过门户后端(服务网关)将微服务 API 暴露给门户和移动 APP。

第四步:将管理端模块集成到统一的操作界面上。

为了实现以上 4 点,相对应的就是下面必需掌握的基础技术(必需的组件)。

  • 注册中心、服务发现、负载均衡:对应上边第一步与第二步

  • 服务网关:对应上边第三步

  • 管理端集成框架:对应上边第四步

注册中心、服务发现、负载均衡

和单体架构不同,微服务架构是由一系列职责单一的细粒度服务构成的 分布式网状结构,服务之间通过轻量机制进行通信,这时候必然引入一个 服务注册发现 问题,也就是说服务提供方要将自己的服务地址注册到某个地方(服务注册中心, Service Registry Center),服务的调用方可以从服务注册中心找到需要调用的服务的地址(服务发现,Service Discovery)。同时,服务提供方一般以集群方式提供服务,也就引入了 负载均衡 的需求。

根据负载均衡(Load Balancer,简称 LB)所在位置的不同,目前主要的服务注册、发现和负载均衡方案有三种:

集中式 LB 方案

第一种是集中式 LB 方案,在服务消费者和服务提供者之间有一个独立的 LB,LB 通常是专门的硬件设备如 F5,或者基于软件如 LVS,HAproxy 等实现。

(点击放大图像)

服务调用者调用服务时,向 LB 发起请求,LB 再根据一定的策略(比如轮询、随机、最小响应时间、最小并发数等等)将请求路由到指定的服务。这个方案的最大问题是:调用者和提供者之间增加了一跳,LB 也最有可能成为整个系统的瓶颈

进程内 LB 方案

第二种是进程内 LB 方案,针对集中式 LB 的不足,进程内 LB 方案将 LB 的功能以库的形式集成到服务消费方进程里头,该方案也被称为软负载 (Soft Load Balancing) 或者客户端负载方案。

(点击放大图像)

其原理是:服务提供者将自身的地址发送到服务注册中心,同时定时发送心跳给注册中心,注册中心按心跳情况判断是否将此节点从注册表中摘除。服务提供者调用服务时,先从注册中心拉取服务注册信息,然后根据一定的策略去调用服务节点。

这种情况下,即使注册中心宕机,调用方也可以根据内存中已经拉到的服务地址将请求路由到正确的服务上去。这个方案的最大问题是:服务调用者可能需要集成注册中心的客户端,即将来注册中心服务端升级,可能会需要升级注册中心客户端

主机独立 LB 进程方案

(点击放大图像)

第三种是主机独立 LB 进程方案,该方案是针对第二种方案的不足而提出的一种折中方案,原理和第二种方案基本类似,不同之处是,他将 LB 和服务发现功能从进程内移出来,变成主机上的一个独立进程,主机上的一个或者多个服务要访问目标服务时,他们都通过同一主机上的独立 LB 进程做服务发现和负载均衡。该方案的典型案例是 Airbnb 的 SmartStack 服务发现框架。这个方案的最大问题是:部署和运维比较麻烦

以上三点摘自杨波先生的《实施微服务,我们需要哪些基础框架?

并作了部分补充,如果希望查看这三个方案的更详细说明,推荐读一读杨波先生的文章。

当下,随着 Netflix 的微服务方案和 Spring Cloud 的兴起与成熟,第二个方案 成为我们的首选。我们推荐使用 Eureka 做服务注册中心,Ribbon 做客户端服务发现和负载均衡

这个选择的最大好处是 简单 + 实用 + 可控,不用引入额外的 Zookeeper、Etcd 做注册中心,部署和运维也都比较简单。从代码上来说,使用起来也非常简单。

只是,需要注意的是,这种方案一般是用来做 局域网内 的负载均衡,如果要为开放到互联网的服务做负载均衡,可以使用 Nginx Upstream 来做。

下面是 Eureka 最重要的几个参数配置,从这些参数也可以大概看看 Eureka 是如何工作的。

(点击放大图像)

由于 Eureka 的注册及过期机制,服务从启动到完全可用需要近 2 分钟的时间,所以,为了提高开发及测试环境中的发版速度,我们改了以下几个参数。生产时,一定要改回去。

(点击放大图像)

Eureka 注册中心的界面如下:

(点击放大图像)

详细信息可参考链接1链接2.

服务网关

通常,一个大系统里会有很多职责单一的微服务,如果门户系统或移动 APP 来调用这些微服务的 API 时,至少要做好两件事:

  • 由统一的入口来调用微服务的 API

  • API 鉴权

这就需要一个 服务网关。2015 年,我们使用 Rest Template + Ribbon 做了一个简单的 API 网关。原理就是当 API 网关接到请求 /service1/api1.do 时,将请求转发到 service1 对应的微服务的 api1 接口。

后来,发现我们实现的功能,Spring Cloud Zuul 都有比较好的实现,也就切换到 Zuul 上面去了。Zuul 是 Netflix 基于 Java 开发的服务端 API 网关和负载均衡器。

除此之外,Zuul 还可以对过滤器进行动态的加载、编译、运行。最令人吃惊的是,Zuul 的转发性能据说和 Nginx 差不多。详细信息可参考https://github.com/Netflix/zuul。

总的来说,一般情况下,API 网关(可以称为门户后端)用来进行反向代理、权限认证、数据剪裁、数据聚合等。

(点击放大图像)

管理端集成框架

掌握注册中心、服务发现、负载均衡和服务网关技术后,微服务已经可以为门户系统和移动 APP 提供可靠服务。但是,给后台运营人员使用的管理端是怎么实现的呢?

由于后端运营系统的压力不大,我们可以通过 CAS 和 UPMS(UPMS 是我们团队研发的契合微服务架构的用户及权限管理系统,我们将分享到青柳云官网,欢迎关注)将单独开发的微服务整合起来。

三步集成一个微服务的基本过程就是:

  1. 在微服务中引入基于 Spring Boot 的 security starter,starter 里包含了系统的顶端 Banner 和左侧菜单。

  2. 将微服务的访问地址注册到 UPMS 中,这个地址作为此微服务的入口菜单(一级菜单)。

  3. 在 UPMS 中配置微服务的功能菜单及角色权限信息。

用户从浏览器打开一个微服务的时候,security starter 会调用 UPMS 的 API 拉取所有的微服务清单(一级菜单)和当前微服务的功能清单(二级菜单),并将当前微服务的页面在内容区展现给用户。

应用架构图:

(点击放大图像)

UPMS 截图,橙色部分由 UPMS 框架提供,红色框为微服务的页面:

(点击放大图像)

UPMS 通过“模块”功能接入新的微服务:

(点击放大图像)

所以,到最后,一个简单模式的基于微服务架构的系统就可以长成这样:

(点击放大图像)

至此,基本的微服务架构已经搭建起来。下面来聊聊怎么解决微服务运维的问题。

运维难

微服务架构的运维问题,主要是相对于单体架构来说的。因为实施微服务架构后,整个系统的模块一下子比原来多了很多,模块变多后,部署和维护的工作量都会变大。所以,解决运维难的问题,可以先从 自动化 的角度来解决。

更进一步,如果希望更好地发挥微服务架构的优势,规避缺点,则建议准备一个可靠的基础设施,包含自动构建、自动部署、日志中心、健康检查、性能监控等功能。

否则,很有可能会因为微服务架构的缺点导致我们的团队丧失对微服务架构的信心,从而回到单体架构的老路上去。工欲善其事,必先利其器,这一点真的很重要

持续集成

单体应用被微服务化后,很有可能从原来的一个程序包分成了 10 个、20 个甚至更多的程序包。那么,我们首先遇到的麻烦就是部署工作直接扩大了 10 - 20 倍。这时,持续集成的方法和工具就成了实施微服务架构的前提条件。我们在实践过程中,利用基于 Docker 的容器服务平台自动部署整个系统的微服务。其过程如下图:

(点击放大图像)

如果没有微服务支撑平台,也可以通过 Shell 脚本的形式来调用 Jenkins API 和 Docker API。

主要过程是:

  1. 调用 Jenkins 命令从代码仓库拉取代码,并打包代码。

  2. 调用 Docker /build 和 /images/push 命令构建镜像,并将镜像推送到私有镜像仓库中。

  3. 调用 Docker /containers/create 和 /containers/start 命令创建并启动容器。

配置中心

在开发 / 测试环境上,程序包已经被打包成 Docker 镜像,如果能将通过测试的镜像直接推到生产环境,可以直接省去为生产环境而重复进行的打包部署工作,岂不是很美?

如果需要达到这个效果,就需要将程序包打包成具有环境无关性,也就是说,在程序包里是不可以有环境相关的配置信息的,这也就引入了 配置中心 组件。

这个组件非常简单,只是根据项目代号、环境代号和微服务代号来获取微服务所需要的键值对。例如:

ProjectA_PRODUCTION_MicroService1_jdbc.connection.url。

使用配置中心还有一个很重要的附加价值,那就是可以做到不同环境的配置信息可以由不同的人来管理,加强了生产环境的配置信息的安全性,例如数据库帐号和密码。

这个模块也有一些开源的项目可以参考,例如百度 disconf,Spring Cloud Config。而我们自己发杨了重复造轮子的精神,开发了一个配置中心微服务,以方便地与上面提到的 UPMS 进行整合。

注意:这一组件并不是微服务架构简单模式的必需组件,只是建议使用。

监控告警

单体应用被微服务化后,一个单体应用被拆成了很多个微服务,系统的健康巡检、性能监控、业务指标健康、文件备份监控、数据库备份监控、定时任务执行情况监控都变得困难。

所以,为了让运维的同学能生活得踏实点,最好也能把监控平台给建了。如果希望快速搭建监控平台,可以考虑 Nagios,Zabbix。如果希望扩展性、可定制性更好,可以考虑使用以下组件搭建:

(点击放大图像)

Collectd 是一款主机、数据库、网络、存储指标采集器。GitHub 上 1653 个 Star。

Metrics 是一款牛逼的 JVM 指标采集器,提供了很多模块可以为第三方库或者应用提供辅助统计信息, 比如 Jetty, Logback,Log4j,Apache HttpClient,Ehcache,JDBI,Jersey,它还可以将度量数据发送给 Ganglia 和 Graphite 以提供图形化的监控。GitHub 上 5000+ 个 Star。

CAdvisor 是一款 Docker 容器指标采集器,Google 出品。GitHub 上 6000 个 Star。

Grafana 是一款非常精美的开源仪表盘工具,支持 Graphite,InfluxDB ,MySQL 和 OpenTSDB 等多种数据源。GitHub 上 17000 个 Star。

InfluxDB 是一款优秀的开源分布式时序数据库,目前在时序数据中排名第一,它的特性中,RETENTION POLICY 可以自动地清除不需要的历史数据,很实用。GitHub 上 11175 个 Star。

除了以上模块,我们还开发了一个模块,用来探测应用程序的健康情况和性能,在主机、程序健康情况、程序性能等各种指标出现异常时,发送警报给运维人员。

总结

在这篇文章结束的时候,我们可以回过头来看看,我们只需要在开发层面理解了注册中心、服务发现、负载均衡、服务网关和管理端集成框架,在运维层面准备好持续集成工具、配置中心和监控告警工具,就可以很容易地落地微服务架构,享受微服务架构带来的精彩。祝大家玩得愉快。

0
0
分享到:
评论

相关推荐

    22-微服务架构:微服务化后,系统架构要如何改造?_For_group_share1

    7. **持续集成/持续部署(CI/CD)**:微服务架构鼓励频繁的迭代和部署,因此建立有效的CI/CD流程至关重要,以确保服务的快速、可靠部署。 8. **服务治理**:包括服务注册、发现、负载均衡、熔断和降级策略等,这些都...

    Spring Cloud微服务架构:项目搭建教程指南,易懂!!!0基础!!!.html

    该教程《Spring Cloud微服务架构:项目搭建教程指南》详细介绍了Spring Cloud的核心技术点和实际应用,旨在帮助初学者从零开始搭建和管理微服务项目。教程分为多个章节,每个章节都包含了具体的技术点讲解以及源码...

    微服务架构体系的深度治理PDF

    微服务架构体系的深度治理是现代企业级应用开发的关键领域,尤其在Java技术栈中,这一概念已经被广泛应用。本文将深入探讨微服务架构的核心概念、治理策略以及在Java环境下的实践。 微服务架构是一种将单一应用程序...

    微服务架构:Spring-Cloud汇总.pdf

    微服务架构是一种软件开发策略,它提倡将单一应用程序分解为一组小型、独立的服务,每个服务都能在其自己的进程中运行,并且可以使用轻量级机制(通常是HTTP RESTful API)相互通信。这种架构允许团队独立地开发、...

    架构探险轻量级微服务架构(下册)

    资源名称:架构探险 轻量级微服务架构(下册)内容简介:《架构探险:轻量级微服务架构...读者可亲自动手,从零开始搭建轻量级微服务架构,充分享受架构 资源太大,传百度网盘了,链接在附件中,有需要的同学自取。

    Apache Dubbo:Dubbo与微服务架构:集成与实践

    #### 二、微服务架构的优势与挑战 ##### 2.1 优势 - **敏捷性**:微服务架构显著提升了开发团队对业务需求的响应速度,可以独立部署和更新服务,无需等待整个应用的发布周期。 - **可维护性**:服务规模相对较小,...

    《唯品会微服务架构演进之路.pdf》

    2. 微服务架构:随着业务增长和 Complexity 增加,唯品会开始采用微服务架构,以解耦合业务逻辑和提高系统可扩展性。 3. Service Mesh:唯品会采用Service Mesh架构,以简化微服务之间的通信和管理。 4. ...

    27丨 微服务架构:微服务究竟是灵丹还是毒药?.pdf

    为了解决这些问题,阿里巴巴在2008年左右开始尝试微服务架构。他们开发了自己的微服务框架——Dubbo,这是基于SOA(面向服务架构)理念的优化版。SOA强调服务的独立性和可重用性,但早期的实现如WSDL和SOAP协议过于...

    微服务架构治理 - 架构腐化之谜-Thoughtworks

    微服务架构治理 - 架构腐化之谜-Thoughtworks 微服务架构治理是指在微服务架构中,通过合理的设计、实施和管理来确保架构的健康度和可维护性。本文将讨论微服务架构治理的重要性、架构腐化的原因、保持架构健康度的...

    微服务架构的应用性能监控.pdf

    在这个过程中,听云从单体架构开始,逐步将核心组件微服务化,最后形成微服务架构。 听云微服务化历程包括: * 微服务架构下的应用性能监控:使用监听云Server、Cat和Zipkin等监控工具对微服务架构下的应用系统...

    最新“系统架构设计师”论文范文——论微服务架构及其应用.docx

    【系统架构设计师】论文主要探讨了微服务架构在构建一站式互联网大数据征信平台中的应用,文章首先介绍了背景,指出传统单体架构在面对快速变化的需求和大规模用户量时的不足,以此作为采用微服务架构的理由。...

    微服务架构.ppt

    微服务架构.ppt 是关于微服务架构学习的一款非常好的ppt。

    消息推送项目(开发中)微服务架构:SpringCloud(网关+哨兵+Seata+Nacos+

    消息推送项目(开发中)微服务架构:SpringCloud(网关+哨兵+Seata+Nacos+RocktMQ)+Dubbo3+SaToken+Mysq

    六种微服务架构的设计模式.pdf

    六种微服务架构的设计模式.pdf 微服务架构的设计模式是软件架构中的一种重要设计模式,它可以帮助开发者设计和实现更加灵活、可扩展和高效的微服务系统。在这篇文章中,我们将探讨六种常见的微服务架构设计模式:...

    后端微服务架构:微服务概念.zip

    后端技术系列教程,包括: API开发全套教程 后端安全全套教程 后端微服务架构全套教程 后端性能优化全套教程 后端框架全套教程 后端缓存技术全套教程 后端编程语言全套教程 数据库技术全套教程

    微服务介绍/微服务架构方案PPT

    1. **逐步迁移**: 从现有系统逐步过渡到微服务架构,减少一次性转型的风险。 2. **小团队自治**: 建立小而专注的团队,每个团队负责一个或几个微服务,减少沟通成本,提高决策效率。 3. **持续集成/持续部署(CI/CD)*...

    [云框架]基于SpringCloud的微服务架构-用户指南

    【云框架】基于Spring Cloud的微服务架构-用户指南 在现代软件开发中,微服务架构已经成为构建可扩展、高可用且易于维护的应用程序的重要模式。Spring Cloud作为Java开发领域内的一个主流微服务框架,为开发者提供...

Global site tag (gtag.js) - Google Analytics