`
baobeituping
  • 浏览: 1068040 次
  • 性别: Icon_minigender_1
  • 来自: 长沙
社区版块
存档分类
最新评论

spring cloud zuul实现从数据库中动态路由

 
阅读更多

项目引用jdbctemplate和druid从数据库中动态获取路由信息。

zuul作为一个网关,是用户请求的入口,担当鉴权、转发的重任,理应保持高可用性和具备动态配置的能力。

我画了一个实际中可能使用的配置框架,如图。

当用户发起请求后,首先通过并发能力强、能承担更多用户请求的负载均衡器进行第一步的负载均衡,将大量的请求分发至多个网关服务。这是分布式的第一步。如果是使用docker的话,并且使用rancher进行docker管理,那么可以很简单的使用rancher自带的负载均衡,创建HaProxy,将请求分发至多个Zuul的docker容器。使用多个zuul的原因即是避免单点故障,由于网关非常重要,尽量配置多个实例。

然后在Zuul网关中,执行完自定义的网关职责后,将请求转发至另一个HaProxy负载的微服务集群,同样是避免微服务单点故障和性能瓶颈。

最后由具体的微服务处理用户请求并返回结果。

那么为什么要设置zuul的动态配置呢,因为网关其特殊性,我们不希望它重启再加载新的配置,而且如果能实时动态配置,我们就可以完成无感知的微服务迁移替换,在某种程度还可以完成服务降级的功能。

zuul的动态配置也很简单,这里我们参考http://blog.csdn.net/u013815546/article/details/68944039 并使用他的方法,从数据库读取配置信息,刷新配置。

 

看实现类

配置文件里我们可以不配置zuul的任何路由,全部交给数据库配置。

 

  1.  
    package com.tianyalei.testzuul.config;
  2.  
     
  3.  
    import org.slf4j.Logger;
  4.  
    import org.slf4j.LoggerFactory;
  5.  
    import org.springframework.beans.BeanUtils;
  6.  
    import org.springframework.cloud.netflix.zuul.filters.RefreshableRouteLocator;
  7.  
    import org.springframework.cloud.netflix.zuul.filters.SimpleRouteLocator;
  8.  
    import org.springframework.cloud.netflix.zuul.filters.ZuulProperties;
  9.  
    import org.springframework.jdbc.core.BeanPropertyRowMapper;
  10.  
    import org.springframework.jdbc.core.JdbcTemplate;
  11.  
    import org.springframework.util.StringUtils;
  12.  
     
  13.  
    import java.util.LinkedHashMap;
  14.  
    import java.util.List;
  15.  
    import java.util.Map;
  16.  
     
  17.  
    public class CustomRouteLocator extends SimpleRouteLocator implements RefreshableRouteLocator {
  18.  
     
  19.  
    public final static Logger logger = LoggerFactory.getLogger(CustomRouteLocator.class);
  20.  
     
  21.  
    private JdbcTemplate jdbcTemplate;
  22.  
     
  23.  
    private ZuulProperties properties;
  24.  
     
  25.  
    public void setJdbcTemplate(JdbcTemplate jdbcTemplate) {
  26.  
    this.jdbcTemplate = jdbcTemplate;
  27.  
    }
  28.  
     
  29.  
    public CustomRouteLocator(String servletPath, ZuulProperties properties) {
  30.  
    super(servletPath, properties);
  31.  
    this.properties = properties;
  32.  
    logger.info("servletPath:{}", servletPath);
  33.  
    }
  34.  
     
  35.  
    //父类已经提供了这个方法,这里写出来只是为了说明这一个方法很重要!!!
  36.  
    // @Override
  37.  
    // protected void doRefresh() {
  38.  
    // super.doRefresh();
  39.  
    // }
  40.  
     
  41.  
     
  42.  
    @Override
  43.  
    public void refresh() {
  44.  
    doRefresh();
  45.  
    }
  46.  
     
  47.  
    @Override
  48.  
    protected Map<String, ZuulProperties.ZuulRoute> locateRoutes() {
  49.  
    LinkedHashMap<String, ZuulProperties.ZuulRoute> routesMap = new LinkedHashMap<>();
  50.  
    //从application.properties中加载路由信息
  51.  
    routesMap.putAll(super.locateRoutes());
  52.  
    //从db中加载路由信息
  53.  
    routesMap.putAll(locateRoutesFromDB());
  54.  
    //优化一下配置
  55.  
    LinkedHashMap<String, ZuulProperties.ZuulRoute> values = new LinkedHashMap<>();
  56.  
    for (Map.Entry<String, ZuulProperties.ZuulRoute> entry : routesMap.entrySet()) {
  57.  
    String path = entry.getKey();
  58.  
    // Prepend with slash if not already present.
  59.  
    if (!path.startsWith("/")) {
  60.  
    path = "/" + path;
  61.  
    }
  62.  
    if (StringUtils.hasText(this.properties.getPrefix())) {
  63.  
    path = this.properties.getPrefix() + path;
  64.  
    if (!path.startsWith("/")) {
  65.  
    path = "/" + path;
  66.  
    }
  67.  
    }
  68.  
    values.put(path, entry.getValue());
  69.  
    }
  70.  
    return values;
  71.  
    }
  72.  
     
  73.  
    private Map<String, ZuulProperties.ZuulRoute> locateRoutesFromDB() {
  74.  
    Map<String, ZuulProperties.ZuulRoute> routes = new LinkedHashMap<>();
  75.  
    List<ZuulRouteVO> results = jdbcTemplate.query("select * from gateway_api_define where enabled = true ", new
  76.  
    BeanPropertyRowMapper<>(ZuulRouteVO.class));
  77.  
    for (ZuulRouteVO result : results) {
  78.  
    if (StringUtils.isEmpty(result.getPath()) ) {
  79.  
    continue;
  80.  
    }
  81.  
    if (StringUtils.isEmpty(result.getServiceId()) && StringUtils.isEmpty(result.getUrl())) {
  82.  
    continue;
  83.  
    }
  84.  
    ZuulProperties.ZuulRoute zuulRoute = new ZuulProperties.ZuulRoute();
  85.  
    try {
  86.  
    BeanUtils.copyProperties(result, zuulRoute);
  87.  
    } catch (Exception e) {
  88.  
    logger.error("=============load zuul route info from db with error==============", e);
  89.  
    }
  90.  
    routes.put(zuulRoute.getPath(), zuulRoute);
  91.  
    }
  92.  
    return routes;
  93.  
    }
  94.  
     
  95.  
    public static class ZuulRouteVO {
  96.  
     
  97.  
    /**
  98.  
    * The ID of the route (the same as its map key by default).
  99.  
    */
  100.  
    private String id;
  101.  
     
  102.  
    /**
  103.  
    * The path (pattern) for the route, e.g. /foo/**.
  104.  
    */
  105.  
    private String path;
  106.  
     
  107.  
    /**
  108.  
    * The service ID (if any) to map to this route. You can specify a physical URL or
  109.  
    * a service, but not both.
  110.  
    */
  111.  
    private String serviceId;
  112.  
     
  113.  
    /**
  114.  
    * A full physical URL to map to the route. An alternative is to use a service ID
  115.  
    * and service discovery to find the physical address.
  116.  
    */
  117.  
    private String url;
  118.  
     
  119.  
    /**
  120.  
    * Flag to determine whether the prefix for this route (the path, minus pattern
  121.  
    * patcher) should be stripped before forwarding.
  122.  
    */
  123.  
    private boolean stripPrefix = true;
  124.  
     
  125.  
    /**
  126.  
    * Flag to indicate that this route should be retryable (if supported). Generally
  127.  
    * retry requires a service ID and ribbon.
  128.  
    */
  129.  
    private Boolean retryable;
  130.  
     
  131.  
    private Boolean enabled;
  132.  
     
  133.  
    public String getId() {
  134.  
    return id;
  135.  
    }
  136.  
     
  137.  
    public void setId(String id) {
  138.  
    this.id = id;
  139.  
    }
  140.  
     
  141.  
    public String getPath() {
  142.  
    return path;
  143.  
    }
  144.  
     
  145.  
    public void setPath(String path) {
  146.  
    this.path = path;
  147.  
    }
  148.  
     
  149.  
    public String getServiceId() {
  150.  
    return serviceId;
  151.  
    }
  152.  
     
  153.  
    public void setServiceId(String serviceId) {
  154.  
    this.serviceId = serviceId;
  155.  
    }
  156.  
     
  157.  
    public String getUrl() {
  158.  
    return url;
  159.  
    }
  160.  
     
  161.  
    public void setUrl(String url) {
  162.  
    this.url = url;
  163.  
    }
  164.  
     
  165.  
    public boolean isStripPrefix() {
  166.  
    return stripPrefix;
  167.  
    }
  168.  
     
  169.  
    public void setStripPrefix(boolean stripPrefix) {
  170.  
    this.stripPrefix = stripPrefix;
  171.  
    }
  172.  
     
  173.  
    public Boolean getRetryable() {
  174.  
    return retryable;
  175.  
    }
  176.  
     
  177.  
    public void setRetryable(Boolean retryable) {
  178.  
    this.retryable = retryable;
  179.  
    }
  180.  
     
  181.  
    public Boolean getEnabled() {
  182.  
    return enabled;
  183.  
    }
  184.  
     
  185.  
    public void setEnabled(Boolean enabled) {
  186.  
    this.enabled = enabled;
  187.  
    }
  188.  
    }
  189.  
    }



  1.  
    package com.tianyalei.testzuul.config;
  2.  
     
  3.  
    import org.springframework.beans.factory.annotation.Autowired;
  4.  
    import org.springframework.boot.autoconfigure.web.ServerProperties;
  5.  
    import org.springframework.cloud.netflix.zuul.filters.ZuulProperties;
  6.  
    import org.springframework.context.annotation.Bean;
  7.  
    import org.springframework.context.annotation.Configuration;
  8.  
    import org.springframework.jdbc.core.JdbcTemplate;
  9.  
     
  10.  
    @Configuration
  11.  
    public class CustomZuulConfig {
  12.  
     
  13.  
    @Autowired
  14.  
    ZuulProperties zuulProperties;
  15.  
    @Autowired
  16.  
    ServerProperties server;
  17.  
    @Autowired
  18.  
    JdbcTemplate jdbcTemplate;
  19.  
     
  20.  
    @Bean
  21.  
    public CustomRouteLocator routeLocator() {
  22.  
    CustomRouteLocator routeLocator = new CustomRouteLocator(this.server.getServletPrefix(), this.zuulProperties);
  23.  
    routeLocator.setJdbcTemplate(jdbcTemplate);
  24.  
    return routeLocator;
  25.  
    }
  26.  
     
  27.  
    }


下面的config类功能就是使用自定义的RouteLocator类,上面的类就是这个自定义类。

 

里面主要是一个方法,locateRoutes方法,该方法就是zuul设置路由规则的地方,在方法里做了2件事,一是从application.yml读取配置的路由信息,二是从数据库里读取路由信息,所以数据库里需要一个各字段和ZuulProperties.ZuulRoute一样的表,存储路由信息,从数据库读取后添加到系统的Map<String, ZuulProperties.ZuulRoute>中。

在实际的路由中,zuul就是按照Map<String, ZuulProperties.ZuulRoute>里的信息进行路由转发的。

建表语句:

 

  1.  
    create table `gateway_api_define` (
  2.  
    `id` varchar(50) not null,
  3.  
    `path` varchar(255) not null,
  4.  
    `service_id` varchar(50) default null,
  5.  
    `url` varchar(255) default null,
  6.  
    `retryable` tinyint(1) default null,
  7.  
    `enabled` tinyint(1) not null,
  8.  
    `strip_prefix` int(11) default null,
  9.  
    `api_name` varchar(255) default null,
  10.  
    primary key (`id`)
  11.  
    ) engine=innodb default charset=utf8
  12.  
     
  13.  
     
  14.  
    INSERT INTO gateway_api_define (id, path, service_id, retryable, strip_prefix, url, enabled) VALUES ('user', '/user/**', null,0,1, 'http://localhost:8081', 1);
  15.  
    INSERT INTO gateway_api_define (id, path, service_id, retryable, strip_prefix, url, enabled) VALUES ('club', '/club/**', null,0,1, 'http://localhost:8090', 1);

通过上面的两个类,再结合前面几篇讲过的zuul的使用,就可以自行测试一下在数据库里配置的信息能否在zuul中生效了。

数据库里的各字段分别对应原本在yml里配置的同名属性,如path,service_id,url等,等于把配置文件存到数据库里。

至于修改数据库值信息后(增删改),让zuul动态生效需要借助于下面的方法

 

  1.  
    package com.tianyalei.testzuul.config;
  2.  
     
  3.  
    import org.springframework.beans.factory.annotation.Autowired;
  4.  
    import org.springframework.cloud.netflix.zuul.RoutesRefreshedEvent;
  5.  
    import org.springframework.cloud.netflix.zuul.filters.RouteLocator;
  6.  
    import org.springframework.context.ApplicationEventPublisher;
  7.  
    import org.springframework.stereotype.Service;
  8.  
     
  9.  
    @Service
  10.  
    public class RefreshRouteService {
  11.  
    @Autowired
  12.  
    ApplicationEventPublisher publisher;
  13.  
     
  14.  
    @Autowired
  15.  
    RouteLocator routeLocator;
  16.  
     
  17.  
    public void refreshRoute() {
  18.  
    RoutesRefreshedEvent routesRefreshedEvent = new RoutesRefreshedEvent(routeLocator);
  19.  
    publisher.publishEvent(routesRefreshedEvent);
  20.  
    }
  21.  
    }

可以定义一个Controller,在Controller里调用refreshRoute方法即可,zuul就会重新加载一遍路由信息,完成刷新功能。通过修改数据库,然后刷新,经测试是正常的。

 

  1.  
    @RestController
  2.  
    public class RefreshController {
  3.  
    @Autowired
  4.  
    RefreshRouteService refreshRouteService;
  5.  
    @Autowired
  6.  
    ZuulHandlerMapping zuulHandlerMapping;
  7.  
     
  8.  
    @GetMapping("/refreshRoute")
  9.  
    public String refresh() {
  10.  
    refreshRouteService.refreshRoute();
  11.  
    return "refresh success";
  12.  
    }
  13.  
     
  14.  
    @RequestMapping("/watchRoute")
  15.  
    public Object watchNowRoute() {
  16.  
    //可以用debug模式看里面具体是什么
  17.  
    Map<String, Object> handlerMap = zuulHandlerMapping.getHandlerMap();
  18.  
    return handlerMap;
  19.  
    }
  20.  
     
  21.  
    }

 application.yml文件

spring:

  application:

    name: microservice-api-gateway

  datasource:

    driver-class-name: com.mysql.jdbc.Driver

    initialize: true 

    name: base

    url: jdbc:mysql://127.0.0.1:3306/test

    username: tuping

    password: 123456

    initialSize: 5

    minIdle: 5

    maxIdle: 20

    maxActive: 20

    maxWait: 60000 

    timeBetweenEvictionRunsMillis: 60000 

    minEvictableIdleTimeMillis: 300000

    testWhileIdle: true

    testOnBorrow: false

    testOnReturn: false

    poolPreparedStatements: true

    maxPoolPreparedStatementPerConnectionSize: 20

server:

  port: 8050

eureka:

  instance:

    hostname: gateway

  client:

    serviceUrl:

      defaultZone: http://localhost:8761/eureka/

zuul:

  ignored-services: microservice-provider-user                        # 需要忽视的服务(配置后将不会被路由)

  routes:

    api-a:                                                            # 可以随便写,在zuul上面唯一即可;当这里的值 = service-id时,service-id可以不写。

      path: /api-a/**                                             # 想要映射到的路径

      service-id: CLOUD-RIBBON-MESSAGESYSTEM     # Eureka中的serviceId

 

参考http://blog.csdn.net/u013815546/article/details/68944039,作者从源码角度讲解了动态配置的使用。

分享到:
评论

相关推荐

    基于智能温度监测系统设计.doc

    基于智能温度监测系统设计.doc

    搜广推推荐系统中传统推荐系统方法思维导图整理-完整版

    包括userCF,itemCF,MF,LR,POLY2,FM,FFM,GBDT+LR,阿里LS-PLM 基于深度学习推荐系统(王喆)

    2023-04-06-项目笔记 - 第三百五十五阶段 - 4.4.2.353全局变量的作用域-353 -2025.12.22

    2023-04-06-项目笔记-第三百五十五阶段-课前小分享_小分享1.坚持提交gitee 小分享2.作业中提交代码 小分享3.写代码注意代码风格 4.3.1变量的使用 4.4变量的作用域与生命周期 4.4.1局部变量的作用域 4.4.2全局变量的作用域 4.4.2.1全局变量的作用域_1 4.4.2.353局变量的作用域_353- 2024-12-22

    和美乡村城乡融合发展数字化解决方案.docx

    和美乡村城乡融合发展数字化解决方案.docx

    CNN基于Python的深度学习图像识别系统

    基于Python的深度学习图像识别系统是一个利用卷积神经网络(CNN)对图像进行分类的先进项目。该项目使用Python的深度学习库,如TensorFlow,构建和训练一个模型,能够自动识别和分类图像中的对象。系统特别适合于图像处理领域的研究和实践,如计算机视觉、自动驾驶、医疗影像分析等。 项目的核心功能包括数据预处理、模型构建、训练、评估和预测。用户可以上传自己的图像或使用预定义的数据集进行训练。系统提供了一个直观的界面,允许用户监控训练进度,并可视化模型的性能。此外,系统还包括了一个模型优化模块,通过调整超参数和网络结构来提高识别准确率。 技术层面上,该项目使用了Python编程语言,并集成了多个流行的机器学习库,如NumPy、Pandas、Matplotlib等,用于数据处理和可视化。模型训练过程中,系统会保存训练好的权重,以便后续进行模型评估和预测。用户可以通过简单的API调用,将新的图像输入到训练好的模型中,获取预测结果。

    拳皇97.exe拳皇972.exe拳皇973.exe

    拳皇97.exe拳皇972.exe拳皇973.exe

    基于python和协同过滤算法的电影推荐系统

    基于python和协同过滤算法的电影推荐系统 基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法的电影推荐系统基于python和协同过滤算法

    DEV-CPP-RED-PANDA

    DEV-CPP-RED-PANDA

    Python语言求解旅行商(TSP)问题,算法包括禁忌搜索、蚁群算法、模拟退火算法等

    Python语言求解旅行商问题,算法包括禁忌搜索、蚁群算法、模拟退火算法等。

    pdfjs2.5.207和4.9.155

    pdfjs 用于在浏览器中查看/预览/打印pdf。 pdfjs 2.5.207 支持firefox/chrome/edge/ie11以上版本。 如果需要支持旧版本浏览器,可以使用这个,是未修改过的原版,支持打印和下载按钮。亲测有效。 pdf 4.9.155分两个包: pdfjs-4.9.155-dist.zip pdfjs-4.9.155-legacy-dist.zip

    建设项目现场高温人员中暑事故应急预案.docx

    建设项目现场高温人员中暑事故应急预案

    数据结构上机实验大作业-线性表选题.zip

    数据结构上机实验大作业-线性表选题.zip

    基于高德地图的校园导航全部资料+详细文档+高分项目.zip

    【资源说明】 基于高德地图的校园导航全部资料+详细文档+高分项目.zip 【备注】 1、该项目是个人高分项目源码,已获导师指导认可通过,答辩评审分达到95分 2、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 3、本项目适合计算机相关专业(人工智能、通信工程、自动化、电子信息、物联网等)的在校学生、老师或者企业员工下载使用,也可作为毕业设计、课程设计、作业、项目初期立项演示等,当然也适合小白学习进阶。 4、如果基础还行,可以在此代码基础上进行修改,以实现其他功能,也可直接用于毕设、课设、作业等。 欢迎下载,沟通交流,互相学习,共同进步!

    全自动批量建站快速养权重站系统【纯静态html站群版】:(GPT4.0自动根据关键词写文章+自动发布+自定义友链+自动文章内链+20%页面加提权词)

    【静态站群程序视频演示,只有视频,不含程序,下载须知】【静态站群程序视频演示,只有视频,不含程序,下载须知】全自动批量建站快速养权重站系统【纯静态html站群版】:(GPT4.0自动根据关键词写文章+自动发布+自定义友链+自动文章内链+20%页面加提权词)

    9.30 SWKJ 男头7张+女头2张.zip

    9.30 SWKJ 男头7张+女头2张.zip

    基于java+springboot+vue+mysql的技术交流和分享平台 源码+数据库+论文(高分毕业设计).zip

    项目已获导师指导并通过的高分毕业设计项目,可作为课程设计和期末大作业,下载即用无需修改,项目完整确保可以运行。 包含:项目源码、数据库脚本、软件工具等,该项目可以作为毕设、课程设计使用,前后端代码都在里面。 该系统功能完善、界面美观、操作简单、功能齐全、管理便捷,具有很高的实际应用价值。 项目都经过严格调试,确保可以运行!可以放心下载 技术组成 语言:java 开发环境:idea、vscode 数据库:MySql5.7以上 部署环境:maven 数据库工具:navicat

    一个通过单片机在各种屏幕上显示中文的解决方案.7z

    一个通过单片机在各种屏幕上显示中文的解决方案.7z

    Halcon模板匹配图像包

    图像

    线上辅导班系统-JAVA-基于springboot的线上辅导班系统的开发与设计(毕业论文)

    一、用户管理功能 用户注册与登录 学生注册:学生可以通过手机号、邮箱、社交账号等方式注册,填写个人信息(如姓名、年龄、学校等)。 家长/监护人账户:支持家长/监护人注册并管理学生账户,查看学习进度和成绩。 教师账户:教师可以注册并设置个人资料,上传资质认证文件。 管理员账户:管理员负责整个系统的管理,包括用户管理、课程管理、平台设置等。 用户权限管理 角色权限:系统根据用户类型(学生、家长、教师、管理员)分配不同权限,确保信息安全。 家长监督:家长可以查看子女的学习进度、成绩和教师反馈,参与学习监督。 个人资料管理 用户可以在个人中心更新基本信息,设置个人头像、联系方式、密码等。 支持学籍信息的维护,例如学生的年级、班级、课程历史等。 二、课程管理功能 课程设置 课程创建与编辑:教师或管理员可以创建和编辑课程内容,上传课件、视频、文档等教学材料。 课程分类:根据学科、年级、难度等维度进行课程分类,方便学生浏览和选择。 课程排课:管理员可以设置课程的时间表、教学内容和授课教师,并调整上课时间和频率。 课程安排与通知 课程预约:学生可以在线选择并预约感兴趣的课程,系统根据学生的时

    英特尔2021-2024年网络连接性和IPU路线图

    内容概要:本文档介绍了英特尔2021年至2024年的网络连接性产品和智能处理单元(IPU)的战略和技术路线图。涵盖了从10GbE到200GbE的不同系列以太网适配器的特性、性能和发布时间。详细列出了各个产品的关键功能,如PCIe接口、安全特性、RDMA支持等。同时,介绍了IPU的发展计划,包括200G、400G和800G的不同代次产品的性能提升和新的功能特点。 适合人群:从事网络工程、数据中心管理、IT架构设计的专业技术人员。 使用场景及目标:本文档主要用于了解英特尔未来几年在以太网适配器和IPU领域的技术和产品规划,帮助企业在采购和部署网络设备时做出决策。同时,为研究人员提供最新技术发展趋势的参考。 其他说明:文档内容涉及的技术细节和时间表可能会有变动,请以英特尔官方发布的最新信息为准。

Global site tag (gtag.js) - Google Analytics