查看原文
其他

如何正确使用上线部署,泳道、预发布到底如何理解?

张张 架构精进之路
2024-09-01
hello,大家好,我是张张,「架构精进之路」公号作者。

一、背景

如今互联网,随着业务需求迭代快速,同一个服务可能存在多个同时开发和测试的功能,容易发生资源抢占分支互相冲突影响的问题,降低开发测试效率。
同时微服务架构下,一个功能可能需要依赖多个服务。在测试其中一个服务的改动时,如果依赖的服务发生了改动或者故障,也会影响这个功能的测试。
......
以上种种问题情况,都会导致服务从测试到线上正式环境的环境差异性较大。
规范上线部署流程,通过对环境的隔离来剥离耦合型风险,便于问题暴露及快速解决。

二、预发布环境

2.1 介绍

预发布环境 Staging,即线上环境、正式生产环境。
为避免因为测试环境和线上环境的差异性等带来的缺陷漏测而设立的一套环境。其配置等基本和线上一致,只是预发布环境web服务器不在线上集成服务器范围之内,为单独的一台机器。
预发布环境 也算是线上/正式生产环境,只是其具有特殊的隔离特性(包括网络/数据/用户/行为等),不能被线上用户访问。

2.2 预发布环境 vs 灰度环境


预发布环境 灰度环境
目标正式发布之前进行最后的测试和准备工作,确保产品稳定可靠在产品正式发布之前对用户进行试用,收集反馈和观察市场反应
范围涉及整个产品,所有功能和特性都会进行全面测试仅涉及一小部分用户,为了控制风险和规模可控
时间点预发布通常在正式发布之前的最后阶段进行,通常会有一个明确的时间表灰度发布在预发布之后,但在正式发布之前的任何时间进行,其持续时间可以根据反馈和调整的需要而定
网络与生产隔离与生产一致
隔离性真实用户无法访问真实用户可访问

2.3 变更操作

Q:如果新版本程序需要更改表结构等(eg. 加个表字段),那么,部署到预发布环境时也需要更改表字段,这个可能会影响线上环境程序代码的运行,如何解决?

1)把预发布环境使用的数据库切换为测试环境使用的数据库;

2)根据实际部署过程,如果有必要,可有针对性的测试下数据库的变更是否会影响线上当前代码程序的运行;

3)把新代码部署到预发布环境,测试程序是否正常运行;

4)预发布测试完毕,如果没问题,先上线数据库(即在正式环境执行对应的数据库变更操作);

5)把预发布环境连接的数据库切换为线上环境使用的数据库,再次进行预发布环境的测试;

6)如果预发布环境测试通过,则把预发布环境的代码部署到线上生产环境。

三、多泳道部署

3.1 介绍

多泳道部署(Multi-lane Deployment)是一种部署策略。

当指定某泳道发布服务时,发布系统会为该服务的实例打上相应的泳道标记,服务注册和发现模块就能知道同一服务的不同实例所属的泳道。


所谓泳道,可以理解为多个并行且相互隔离的调用链,彼此调用互不影响,就如同泳池里的泳道一样。这种策略可以提高系统的可用性和容错性,因为如果一个泳道出现问题,其他泳道仍然可以正常运行。

除了创建出来的泳道之外,还会存有一条默认的主干道,为各个服务提供默认实例,可以将其理解为常规的、常备的测试环境。除了创建的泳道外,还会存在一条默认的主干道,提供各个服务的默认实例,可以理解为常规、常备的测试环境。


3.2 端到端的统一

1)在服务 A 需对服务 B 进行访问之时,服务 A 会率先于服务发现模块当中获取服务 B 实例的地址。鉴于服务 A 在请求中添加了 t2 泳道的标识,此时服务发现模块将会从服务 B 处于 t2 泳道的实例之中选取其一进行返回,随后服务 A 便可直接对相应实例予以访问。

2)移动端和 web 端团队需要配合做相应的改造。测试时,移动端和 web 端的测试人员能够自行切换至指定泳道,切换完毕后,所有发送至服务端的请求都会带上相应的泳道标记,这样泳道测试就实现了端到端统一。

泳道 主要解决的问题:

  • 解决资源抢占,提高研发效率

  • 保证测试环境的稳定性


3.3 实现思路

实现多泳道部署,主要思路包括以下几点:

1、环境准备

    首先,需要准备多个独立的环境,这些环境可以是物理服务器,也可以是虚拟机或容器。不同的需求需要隔离级别不同,如果多环境共用底层数据,则代码中使用域名配置数据库,由 DNS 服务指向同一套数据库。

    多数情况下,泳道还是采用的底层共用数据存储,好处是每次新创建分支用不到不用再创建数据库和同步数据,大大提高了环境申请和销毁效率。对于自动化测试等需要数据隔离的,我们则另外部署一套全链路环境。

2、配置管理

    每个泳道可能需要不同的配置,例如数据库连接字符串、第三方服务的API密钥等。你需要一个配置管理系统来管理这些配置,并确保它们在部署时被正确地应用到每个泳道。

    逻辑结构主要分为主泳道和分支泳道

    1. 主泳道部署全链路稳定代码,作为公共环境,承载其他环境缺省服务,保证请求链路通畅。

    2. 分支泳道只需部署改动或增量服务,未改动服务使用主泳道中服务,减少公共服务的维护成本,提高使用效率等。

3、部署策略

    你需要决定如何将应用程序部署到各个泳道。你可以选择一次部署到所有泳道,也可以选择逐个部署。

    逐个部署可以降低风险,因为如果新版本有问题,你可以在部署到所有泳道之前发现并修复它。

4、流量管理

    你需要一个负载均衡器或类似的工具来管理流量,将请求分发到各个泳道。你可以根据各种策略来分发流量,例如轮询、最少连接数、响应时间等。

    网关层负责环境识别与环境标识注入,通过测试域名隔离不同环境,RPC 层负责服务发现与选择,环境标识透传等。

5、监控和故障恢复

    你需要监控每个泳道的性能和健康状况,并在检测到问题时自动或手动切换到其他泳道。

四、总结

多泳道建设是一种高效、灵活的开发模式,尤其适用于复杂项目和跨部门协作场景。通过合理划分泳道、优化资源分配和加强团队协作,我们可以显著提高软件交付速度和质量。

在未来软件开发中,多泳道建设将继续发挥重要作用。希望本文能为你提供有益的参考和启示。


·END·

相关阅读:



专注架构技术研究,一起跨越职业瓶颈!

关注公众号,免费领学习资料



如果您觉得还不错,欢迎关注和转发~     


继续滑动看下一个
架构精进之路
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存